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近年 来 ,有 关 随 机 过 程 的 基本 知识 与 方法 ,不 仅 为 概 窗 统计 专 
业 所 必需 .也 为 计算 数学 .物理 .生物 ,化 学 等 各 然 科学 ,以 玖 工程、 
经 济 . 管 理 , 坎 至 人 文科 学 等 广 冰 领域 的 研究 工作 所 宕 要 . 为 适应 
这 种 需要 .各 高 校 不 仅 为 概 浴 统 计 专 业 大 学 本 科 生 开设 应 用 随 视 
过 程 课程 .也 纷纷 为 上 述 其 他 专业 的 研究 生 或 高 个 级 大 学 生 开 设 
应 用 随机 过 程 课 . 笔 考 与 许多 这 方面 的 任课 教师 讨论 .交换 意见 . 
同感 缺少 .本 适 让 于 此 类 课程 的 教材 ,因而 .尽管 深 知 编写 这 样 - . 
本 教材 是 十 分 绿 难 的 ,人 迫 于 教学 的 急需 仍然 揭 为 其 难 作 一 尝试 . 
鉴于 上 上述 写作 意图 与 读音 对 象 ,本 书 着 重 于 随机 过 程 的 概念 、 
思想 方法 .计算 与 实例 ,而 回避 测度 论 水 平 的 数学 严格 性 . 希望 使 
只 此 有 高 等 数学 及 初等 概率 论 基 础 知识 的 读者 就 能 阅读 与 学 习 其 
七 要 部 分 . 蔬 中 努力 收集 各 谨 面 的 应 用 模式 ,将 笔者 见 到 的 文献 资 
料 中 好 的 应 用 实例 加 工 , 简 化 为 宜 于 教学 的 材料 , 写 和 正文 或 列 人 
习题 . 特别 如 模拟 退火 一 一 优化 的 概率 方法 、 伸 经 网 络 的 随机 横 
型 . 隐 马 民 模 型 . 吉 布 斯 抽样 等 新 近 迅 速 发 展 起 来 的 方向 是 随机 过 
程 的 极 好 应 用 ,本 书 力 图 简要 地 阑 明 其 方法 与 思想 ,对 读者 起 一 个 
抛 忧 引 玉 的 作用 . 为 了 便于 有 兴趣 的 读者 进 - - 步 学 习 , 每 章 后 设 有 
附录 ,指出 相应 的 尚 待 深 入 讨论 或 严格 化 的 理论 与 实际 问题 及 参 
考 书 与 文献 . 
已 故 的 我 国 概率 统计 专业 的 开创 者 许 室 禄 教授 指出 ;与 物理 
或 其 他 领域 对 随机 现象 研究 不 同 ,概率 论 中 随机 变量 的 概念 中 暗 
祝 随 机 自 蛮 元 wo- 一 基本 事件 (或 者 说 轨道 ) ,这 个 由 的 引入 至 关 
重要 , 它 使 许多 含糊 不 清 的 问题 ,争论 不 休 的 悖 论 得 以 澄清 与 明 
晰 ;使 许多 复杂 的 问题 得 到 正确 分 析 的 起 点 . 但 是 在 许多 问题 中 ， 
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太 们 浆 并 不 去 仔细 进 帘 这 些 w 究竟 是 什么 .只 是 明确 有 此 灾 元 ， 
从 而 得 刘 概 率 空 间 的 明确 概念 . 本 书 虽 则 回 浊 测度 论 的 严格 性 ,但 
仍 引 入 委 率 党 问 的 准确 定义 ,使 得 我 们 的 妍 究 具 有 有 概率 论 的 前 味 . 

全 节 林 尾 设 统 一 的 釜 考 文献 日 录 , 按 作者 的 英语 或 汉语 拼 章 
子 必 次 序 统一 排列 ,本 书 是 以 北京 大 学 概率 统计 系 相 笠 生 的 “应 用 
随机 过 答 " 染 的 庄 交 为 基础 ,扩充 ,增补 与 修改 而 成 的 . 本 书 中 不 少 
专 穷 是 甜 卉 直接 由 文献 改写 的 ,错误 与 不 要 必定 不 少 , 县 请 读者 批 
详 与 指 下 ,以 利 修 虚 订正 . 

帮 痢 得 以 完成 本 书 , 首 先 昌 感谢 北大 慨 率 统计 系 , 由 于 他 们 的 
安排 和 鼓 凯 ,使 得 笔者 有 机 会 在 教学 实践 中 完成 本 节 的 写作 和 修 
改 . 还 要 感谢 各 次 听课 的 同学 ,由 寺 他 们 仔细 阅读 原 讲 文 而 帮助 我 
们 纪 正 了 -- 些 不 妥 之 处 . 特别 要 感谢 陈 大 匡 同 志 . 他 在 使 用 原 诽 文 
的 教学 实践 过 程 中 发 现 了 不 少 不 有 要 之 处 ,并 提出 了 了 许多 宝贵 意见 . 
对 和 朝 峰 、 张 侈 和 李 晓 满 等 同志 对 本 书 的 作 图 剧 版 打印 ,付出 了 六 
勘 的 劳动 ,在 此 深 表 谢意 . 
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第 一 章 概论 与 例 


$ 1.1 什么 是 随机 过 程 ? 


在 概 襄 论 中 ,我们 看 到 随机 变量 的 概念 是 很 重要 的 ,但 是 在 大 
量 实际 问题 中 ,往往 还 需要 研究 随机 变量 是 怎样 随时 间 参 数 而 变 
化 的 .也 就 是 说 要 考虑 依赖 参数 的 一 族 随机 变量 . 

将 一 个 电话 交换 机 在 [0, 曲 G 人 >0 时 间 区 闻 内 收 到 的 呼唤 次 
数 记 为 5, 它 是- 个 随机 变量 ,但 随 1 变化 ; 它 义 是 时 间 : 的 函数 . 
叉 例 如 将 其 城市 在 第 = 个 单位 时 间 的 人 口 总 数 记 为 x (n= 二 0,1， 
2 …)* 那 么 要 研究 此 城市 人 口 发 展 变化 就 要 将 {zugz 一 0,1:2，…)} 
这 '- 族 随机 变量 作为 整体 来 研究 , 它 是 一 个 离散 参数 的 随机 过 程 . 
又 如 在 人 研究 流体 的 汕 病 时 ,将 时 刻 上 流体 在 位 置 (zyyv*z) 的 速度 记 
为 etyxryyozlt0zryiz 为 实数 ), 它 就 是 一 个 随机 向 量 ,但 研 
究 浪 流 时 就 需要 对 不 同 的 时 间 # 与 不 同位 置 的 速 讼 作为 一 个 整体 
来 研究 . 

定 尖 411( 随 机 过 程 ) 设 工 是 一 个 指标 集 , 随 机 变量 族 x 二 
{zoET 称 为 随机 过 程 , 其 中心 (固定 马 是 定义 千 概 率 空间 (CQ， 
六 ,让 ) 上 , 取 值 于 集合 5S 的 随机 变量 (向 量 ). 5 称 为 该 随机 过 程 的 
状态 空间 . 

在 上 面 的 定义 中 工 通 常 可 取 为 Z; ( 非 负 整数 集 ),Z( 整 数 
集 》,R+( 非 负 实数 集 ),R( 实 数 集 ) 及 它们 与 一 个 区 间 [e ,全 的 交 . 
也 可 以 取 为 如 (x 元 非 负 整 数 集 ),R3 (Cn 元 实数 集 ),Z* 及 R" 等 ， 
当 ”>]1 时 ,相应 的 随 机 过 程 通 常 叫 随机 场 . 本 书 主要 讨论 n 二 1 
的 情况 , 它 与 >1 的 情况 的 重要 区 别 是 :n= 二 1 时 工 有 一 个 天 然 的 
“全 序 ”, 它 与 随机 过 程 的 发 展 是 一 致 的 ,而 n>1 时 个 中 不 存在 这 
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样 一 个 全 序 . 当 了 是 的 子 集 时 , 称 相应 的 随机 过 程 是 离散 参数 
的 :而 了 当 是 总 的 了 于 区 间 , 和 矩形 或 超 矩 形 则 称 之 为 连续 参数 的 . 

对 应 于 每 个 固定 的 样本 点 wEE 旭 ,定义 1.1 中 的 {xtw) 就 是 
一 个 以 工 为 定义 域 取 值 于 5 的 向 基 值 江 数 ,我 们 通常 称 之 为 此 随 
机 过 程 的 一 条 转 道 ,或 一 -个 实现 . 


$4.2 随机 过 程 的 分 布 与 坐标 过 程 


正如 从 概率 论 的 观点 研究 随机 变量 (向 量 ) 着 重 于 研究 它 的 
分 布 - 样 ,对 随机 过 程 我 们 关心 的 也 是 它 的 统计 特性 一 ”分 布 .但 
是 这 里 我 们 面 对 的 是 无 穷 多 个 随机 变量 ,表征 它们 的 * 联 合 分布 ”， 
就 不 能 简单 地 天 撤 有 限 个 随机 变量 的 做 法 ,只 把 个 数 改 为 无 穷 如 
法 泡 制 . 

例 11 考虑 Bernoulli 序列 fA 一 0,1,2， 其 中 局 
是 在 相互 独立 地 进行 的 -系列 指 币 试验 中 第 次 挪 得 的 结果 :& 
一 1 表示 按 得 正面 ,和 二 一 1 展示 掷 得 反面 . 如 果 按 有 限 个 随机 变 
量 联 合 分 布 那样 ,考虑 概率 ， 

和 Pl&, 一 ot 一 
(二 十 1s7 一 0:1,…) 是 不 行 的 .事实 上 ,由 于 钱币 正 反 对 称 ， 
PE ~ D = Ps,—— l=, 
于 是 


一 1im PT = wo = to 一 如 一 im| 二 ~ 0, 


这 样 ,无 论 试验 结果 炙 和 A (ow6 yw ee 是 什么 都 得 到 零 概 率 ， 
从 而 找 不 到 任何 有 意义 的 统计 规律 来 表达 与 和 有 关 的 可 观测 事件 
的 概率 ， 自然 地 ,我 们 转达 考虑 在 任意 有 限 个 时 刻 的 随机 变量 的 联 
合 分 布 

Fi, a (人 


[aE mt] 





=| 二 (1.1) 


(m1521ri00* sim 为 m 个 不 同 非 负 整数 ,a ;as，… san 各 为 十 1 或 
一 ]). 这 - : 族 分 布 决定 了 £1 一 0,1,2, 呈 ,ns ,} 有 美的 全 部 
可 观测 (有 概率 的 ) 事 件 的 概率 ， 

例 1.2 考虑 流体 的 速度 # 和 {fatty2)( 守 0,zyY4z 为 实 
数 } ,我 们 也 考虑 流体 在 有 限 个 时 刻 志 ,4 ，…,tw 及 有 限 个 位 置 
Cx yi (rr yz XT) 的 速度 的 联合 分 布 ,并 用 这 
一 族 分 布 : 

Pe UI UL go) 
人 Piatt rynt) vp = 3 I 1) 
(1. 2) 

(其 中 避 守 0,zy syyo2) 为 实数 3G 以 2 一 (Ty) Ct， 
yr) tirrsyrr)) 来 刻 茵 ww 这 个 随机 场 的 统计 特性 . 

其 实 ,在 通常 的 应 用 问题 中 ,人们 往往 是 先 由 分 析 或 经 验 ,得 
到 如 上 的 随机 过 程 在 有 限 个 不 同 参数 值 处 的 那些 随机 变量 的 联合 
分 布 ,而 并 未 事先 已 知 存在 一 个 概率 空间 (0, 多 ,PP) 及 其 上 定义 
的 随机 变量 族 ( 这 一 点 在 以 下 我 们 处 理 具 体 随机 过 程 的 例子 时 还 
会 再 仔细 分 析 ). 潮 实 上 ,正如 初等 概率 论 中 把 抽取 作 一 切 可 能 结 
果 的 集合 一 样 ,我 们 这 里 对 向 1. 1, 自 然 可 取 


六 二 {% 一 【oo 0 ys 一 十 1,i 二 1 ,2 }， 
对 向 1.2, 可 取 
N= {fo = (gyit Or yz E Ryv,s,.. 


= 1) tay #3} 
一 CU ye 9 Uz yr Us) } ” 


其 中 每 个 w 可 看 成 是 [0, 十 oo) x R? 上 一 个 三 维 向 量 值 的 沙 数 .于 

是 ,一 个 很 基本 的 问题 就 是 ,已 知 上 面 那样 的 有 限 维 分 布 族 , 是 否 

一 定 可 以 设法 构造 0 上 一 个 概率 空间 (0,.F .PP) 及 其 上 的 随机 变 

量 族 (随机 过 程 ), 使 得 它 在 任意 有 限 个 参数 值 的 那些 随机 变量 内 

有 上 述 已 知 的 有 限 维 联合 分 布 . 从 理论 上 ,著名 的 Kolmogorov 定 
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理 可 以 相当 - 般 地 对 此 作 肯 年 的 答复 . 由 于 这 个 癌 题 不 可 回避 地 
要 用 到 测度 论 的 知识 ,我 们 在 下 面 讨 论 中 不 再 仔细 论证 ,只 是 承认 
这 个 事实 ,并 在 概率 空间 已 经 构造 好 的 基础 上 去 括 进 -- 步 研究 . 

从 另 :个 角度 在 随机 过 程 , 它 也 可 当 作 以 国 数 为 取信 的 随机 
蛮 汇 ,也 就 是 说 .对 固定 的 规 实 wko 可 以 看 成 一 个 从 参数 集 了 了 
到 状态 空间 的 觅 射 ;x 以 多 大 的 概率 随机 地 取 值 于 不 同 的 两 数 ( 映 
射 ), 则 必 册 上 述 有 限 维 联合 分 布 决定 的 . 总 之 ,一 个 随机 过 程 

T= Cr EE TY 

当 疾 定 z€ 于是 .个 随机 变 其 (向量) ;而 固定 wE 0,x.(w) 是 一 个 
了 到 状态 空间 的 函数 (映射 5; 它 的 统计 规律 由 全 体 有 限 个 参量 的 
随机 变量 组 的 联合 分 布 唯一 岂 定 . 








?1,3 简单 对 称 随 机 徘徊 及 其 坐标 过 程 


本 节 中 ,我 们 以 简单 对 称 随 机 徘徊 为 例 构 造 随 机 过 程 ,以 使 读 
者 对 人 随机 过 程 有 更 清晰 的 认识 . 

一个 简单 随机 徘徊 , 即 一 个 粒子 在 直线 上 每 隔 单 位 时 间 独 立 
地 向 左 或 向 右 以 均等 的 机 会 走 一 步 . 兰考 虑 第 ” 步 时 粒子 所 在 的 
位 置 , 它 就 是 -个 随机 过 程 . 但 是 为 了 将 这 样 -个 直观 的 物理 模型 
纳入 上 面 的 数学 框架 中 ,就 需要 给 出 概率 空间 (80,. ,Py ,并 定义 
其 上 的 随机 变 基 族 {12.} 来 表示 上 述 随 机 过 程 ， 

首先 考虑 慨 率 空间 ,按照 基本 事件 就 是 一 切 可 能 的 随机 试验 
的 结果 这 "想法 ,对 随机 徘 向 的 一 切 可 能 结果 的 集合 是 

二 {一 是 数 )， 
其 中 必 表示 走 了 第 ” 步 粒 子 所 在 位 置 ， 由 于 每 次 只 能 走 -一步 , 自 
然 若 取 一 步 的 本 长 为 单位 ,w, 只 能 取 整 数值 . 令 .7 为 包含 一 切 由 
有 限 个 时 间 的 位 置 限定 的 事件 类 的 全 体 事件 
= {Cw 一 和 一 1 为 整数 )} 
(1. 3) 
4 


的 最 小 事件 体 Co- 人 代数) , 记 为 (二 ). 上 表 按 Kolmogorovy 定 理 ( 见 831. 
4) 决 定 一 个 多 上 的 概率 测度 PP, 使 得 党 中 的 集合 与 上 述 的 物理 
模型 符合 , 即 当 对 只 站 二 一 闫 十 (一 到) 为 偶数 时 

Plw:ew, == tds, 一 a = {= pi pr prns (1.4) 
其 中 


w, = bh,, 记 = cz 到 | (1. 47 








_ . ths dl 2) 
Ne 2 " 
而 其 他 情形 (1. 4) 左 边 的 概率 为 0. 这 是 因为 从 时 刻 志 -1 到 ,其 中 
严 步 向 右 避 一 下 砂 疝 左 ( 一 站 一 和 , 准 的 位 移 是 六 一 下， 一 2 
一 站 一 了 十 (一 人 天) 这 个 事件 的 概率 按 二 项 分 布 应 为 
(4 中 给 出 的 pr; 而 由 于 独立 性 , C1, 4) 中 的 联合 分 布 应 为 各 
PE 112 的 乘积 .于 是 ,我 们 有 了 概率 空间 (aa ,. 终 ,P). 若 
w= (wo ) EE 0, 
令 
ea) = ww (#0), (1.5) 
我 们 就 得 到 了 - : 列 随 机 变量 信 .(w) sn 主 0}, 它 正 是 我 们 下 前 随机 
徘徊 的 数学 表示 . 
对 于 概率 空间 中 满足 (1. 5) 的 随机 过 程 叫做 此 概率 空间 的 坐 
标 过 程 . 
上 上面 我 们 得 到 了 随机 徘徊 的 一 个 坐标 过 程 表示 . 当然 随机 徘 
逢 并 不 一 定 要 是 一 个 坐标 过 程 . 例如 , 按 例 1. 1 中 的 Bernoulli 产 
列 我 们 也 可 以 得 到 一 个 坐标 过 程 : 令 
= 0} (1.6) 
及 


六 二 C= {wr 二 a = 1) 


ja > 1 yas 一 士 1 一 工 ,72}, 





PC 一 由 fo 人 一 二 1 一 (3| ， 
.3 为 包 售 所 的 最 小 事件 体 , 辣 祥 由 Kolmogerov 定理 , 按 (1.1) 可 
唯一 决定 (9,.) 上 的 一 个 概率 测 庶 靖 , 从 而 得 到 概率 空间 (9， 


7 令 
上 


于 是 随 讯 恋 量 族 了 一 (152 一 0,1.…) 就 是 刻画 Bernoulli 序列 的 
数学 模型 的 一 个 坐标 过 程 ， 
事实 上 , 苦 i 计 ,jn 二 0.1. 是 例 1.1 中 的 员 经 里 序列 , 令 
Ww) = Pm) 十 Vb), 


下 一 上 


则 9 二 {9 一 0 也 是 刻 丙 随机 徘 得 的 -- 个 随和 宙 过 程 ,但 它 
不 是 坐标 过 程 . 


$1.4 附 录 


1 一个 事件 体 居 代数 ?多 指 某 集合 Q( 全 醚 基本 事件 ) 的 -- 
个 子 集 类 ,满足 : 

天 .1， 多 舍 空 集 妇 与 全 集 翁 

F.2. 对 集合 的 可 列 并 封闭 ( 苦 4E oo>D, 则 【4 € 

,3、 对 集合 余 封闭 (车 4E .实则 AE 7). 

2. 包含 集 类 所 的 最 小 事件 体 7 二 ol 客 ) 指 一 个 事件 体 满足 
最 小 事件 体 唯一 . 

3. 设 0={w=!gd ET mE 5S),T 可 为 实数 集 R, 非 负 实 
数 集 RR" ,整数 集 Z, 非 负 整 数 集 Zr ,状态 空间 8 为 可 列 集 . 定义 柱 
集 类 中 二 [ww = la EE St €E TT}. 

后 





车 .是 包含 旬 的 最 小 事件 体 sc 各 ); 则 .上 的 任 一 概率 也 由 它 
在 党 上 的 取 值 唯一 确定 - 
4. 对 3 中 的 呈 与 了 , 当 汪 为 实数 空间 ,或 4- 维 实 向 基 时 , 柱 集 
类 
={{w: re = 1 
1 EET.A 为 4 维 实 向 二 ! 
(其 中 向 基 % 乞 x 表示 各 分 二 分 别 满足 不 等 式 ), 刚 3 中 结论 仍 成 
Wi 
5. {Kolmogorov 定理 ) 设 有 分 布 阴 数 族 
人 下 
‘其 中 R* 表示 4 维 实数 值 向 量 ) 满 足 祖 穿 性 条 件 
K.1)yF at Lr he, 《mi 9 
对 C1,2," ,m0) 的 任意 排列 Ca-… 2m) 成 立 ( 意 思 是 把 时 间 控 序 与 
里 交 , 习 育 相同 的 并 素 分 布什， 
KK., 2) 下 PF, a pi 
Rs {sn} ;的 于 集 ， 
vy 人 当 EE {sm sn) 
十 5， 当下 下 {ss,)} 
‘意思 是 在 #4,…' ,ss 中 抹 去 若 二 时 刻 得 到 二 ,4 则 在 二 1 
时 刻 的 联合 分 布 应 与 sss 各 时 刻 (xm 盖 ”的 联合 分 布 在 被 抹 
去 的 时 刻 不 加 限制 《x= 二 wo) 的 值 相同 }. 
于 是 存在 62, 多 ) 上 唯 … 的 概率 测度 避 , 在 请 下 对 于 {&.(w) 
会 名 (ET)} 5 6) 的 联合 分 布 为 Fu 其 中 
DD {w= Ct €E Tw € RT), 
是 含 口 的 一 切 住 集 的 最 小 事件 体 Co- 代 数 )( 柱 集 害 久 见 3 与 
4)., 
Kolmogorov 定理 告诉 我 们 ,从 物理 或 直观 模型 的 分 析 得 到 的 
有 限 维 联合 分 布 族 , 可 以 构造 一 个 概率 穿 间 ,及 其 上 的 坐标 这 程 ， 
了 








使 其 有 限 个 时 间 和 参数 的 那些 随机 变量 的 联合 分 布 与 物理 或 直观 的 
分 析 所 得 的 -- 敏 . 即 这 个 数学 异型 林 会 引起 了 矛盾. 

.本 节 的 严格 的 理论 需 有 测度 论 的 基础 ,具体 可 参见 : 注 凯 
阮 : 现 代 慨 率 论 基山 3 复旦 大学 出 版 社 ,1988 ) 与 钱 敏 于, 著 洛 背 : 
《随机 过程 论 并 北京 大 学 出 版 社 ,1997)， 





S15 小 结 


本 章 以 简单 随机 徘徊 为 鲍 前 明 随 机 过 程 的 概念 , 即 描 述 一 族 
依赖 天时 间 参 数 或 空间 参数 随机 地 变化 的 量 的 数学 模型 . 也 就 是 
把 随机 过 程 厦 成 荐 -- 个 概率 空间 上 的 -… 族 依赖 时 间 参 数 的 随机 变 
量 . 并 进而 指出 描述 随机 过 程 的 统计 特征 的 是 所 有 对 应 有 限 个 时 
间 参 数 的 有 限 个 随机 变 其 的 联合 分 布 族 . 同时 还 指出 了 从 实际 问 
是 得 到 概率 空间 和 随机 过 程 的 建 模 思 想 ， 


习 是 


1. 斌 构造 Bernoulli 序列 ( 例 1. 1) 的 梳妆 空间 (器, ,PP 及 续 
标 过 程 . 

2, 设 料 子 作 非 对 称 的 随机 徘 牺 ; 每 步 疝 右 或 向 左 随 机 地 幢 -- 
步 , 第 记 步 向 左 与 向 右 走 的 概率 分 别 是 总 与 gr Cpisqi0, prt a 
=1). 试 宰 造 概率 空间 及 其 上 的 随机 过 程 来 表达 复杂 随机 徘徊 . 

3°. 试 构造 一 个 概率 空间 及 其 上 坐标 过 程 (&,1E RR!) ,使 得 
4 是 独立 增 量 的 正 态 过 程 : 即 满足 

1) 对 任意 的 相生 独立 ， 

2) 一 夺 (12>>s) 的 分 布 是 均值 为 0, 方差 为 :一 。 的 正 态 分 布 . 








第 - 章 ”随机 徘 御 与 布衣 运动 


在 第 - 章 》1.3 中 我 们 介绍 了 - 维 对 称 简单 随 祈 徘 逢 ,本 章 
讨论 较 一 般 的 随机 徘徊 寞 型 及 其 性 质 与 应 出. 
莹 谍 一 个 粒子 在 妨 维 至 加 属 点 ( 记 为 Z 中 的 随 册 运动 :粒子 
和 隔音 位 时 间 相 开 独立 地 小 一 步 ,每 步 可 沿 任意 - 仿 坐 标志 向 下 
-个 单位 长 . 设 粒 子 清 第 & 个 坐标 轴 止 癌 或 负 向 走 一 个 单位 的 概 
率 分 别 是 pi 与 4: 则 





5 和 一 1. 


于 是 第 步 粒 的 位 移 是 -个 随机 变 最 : 


[es 概率 为 pi: 
1 一。 概率 为 gq， 
ay 2 ... (2.1) 


er， 概率 为 pi 
人 概率 为 Oar 

其 中 < es 分 别家 示 沿 第 1,…,d 个 坐标 方 向 的 单位 向 量 ,pi， 
ye OO Edd). 

为 了 要 容纳 所 有 的 (无 限 个 ) 相 互 独 剖 的 x Cw) CR- 1,2,-…)， 
我 们 只 要 取 Qo {ww ) mE ZE {+ es + er, 
土 ex 大 之 1} ;而 .F 为 包含 有 限 个 时 间 任 意 限 定 条 件 的 一 切 事件 
的 最 小 事件 体 ,并 定义 乘积 概率 书 ， 

Plwiwo 后 Ant 三 再 E B,) 





= Pof4) PCB. (2. 2) 


其 由 >>0,Pe(，) 是 2 上 任何 - 个 概率 分 布 , 它 代 表 随 机 徘徊 的 
9 





初始 值 sw 的 分 布 1PkC tt 土 站 十 ez 二 ee 了 (CB 是 xtw) 史 分 
和 (2.1)， 





， 
VE es Wi] Ess co) 


1 (2. 3) 

人 疡 : 引 ” Pas qa | 
所 决定 的 概率 ,于 其 在 4,z .请 ) 中 的 华 标 过 程 凤 可 取 为 

HC) wy (= 1 2) 
从、 
过 
SW) 一 mm 十 Dir), (2. 4) 
和 二 一 上 


就 是 我 们 想得到 的 简单 随机 徘徊 的 数学 表达 . 

在 概率 论 与 应 用 的 文献 中 随机 徘徊 还 可 以 硝 更 广义 的 理解 : 
形 如 (2.4) 的 独立 问 分 布 随机 变量 的 和 (w= 二 0). 也 就 是 说 一 般 的 
随机 徘 利 可 以 不 局 限于 每 次 沿 坐标 办 方向 走 一 个 单位 长 (如 可 以 
有 各 种 跳动 ). 在 本 章 中 我 们 主要 讨论 简单 随机 徘徊 的 性 质 与 应 
用. 简单 随机 徘徊 是 -一 个 很 典型 的 随机 运动 模型 ,在 生物 ,物理 ,化 
学 、 计 算 方 法 等 许多 方面 都 有 大 量 应 办 . 


3 2.1 简单 随机 徘徊 的 分 布 与 
首次 返回 (或 离开 ;时间 


1. 简单 随机 徘徊 的 分 布 


设 简单 随机 徘 逢 在 时 劾 mm 的 位 置 为 z, 在 时 刻 # 十 m 的 位 图 
为 y, 则 经 过 个 单位 时 间 它 的 位 移 是 yz, 这 个 事件 的 概率 是 
多 项 分 布 ; 
py 一 了 ) 一 2 Phgt pragheeee phigh 
(2,5) 
其 中 和 号 取 遍 满足 以 让 条 件 的 各 项 ， 
1 总 





Jj 十 丰 | 十 下 十 十 于 十 电 十 Hr 一， 
3 一 dd) 
而 如 与 如 分别 表 寺 在 步 中 沿 & 的 正 向 与 入 向 所 走 的 步 数 ; 
| ,| 肯 示 将 个 学 罕 分 成 24 堆 , 各 有 w,，… ,mw 个 
PE re Ha 


抑 素 的 分 法 数 . 它 等 下 ,一 ,一 他 ,一 ，. 简单 随机 徘 币 5 一 {3 一 


WE N27 I re phe] 
0,] ,**} 的 有 有 限 维 分 布 为 


局 


- NO) ptm) ps C4 一 Tp a (T, Tp, st 1 ， 








当 汪 一 福生 3 一 了 十 力 为 偶数 时 ; 
0， 其他， 


C2.6) 
特别 , 当 一 1;em=-0 肝 
1 nH! "lr 
1 于 二 十 工 2 1 
prty -一 | 2 1!\ 2 
| 


{2,7) 
它 下 是 - :项 分 布 ， 
当 d 一 2,6 是 平面 上 的 随机 徘 制 ,y 一 x 二 Cy, -00x 一 xu), 且 
ny Cy re) 为 偶数 时 
Ply — xz) 


rT T+tv ry 


上 
+ | _ 
了 点 


ba 加 下 上 声 493 lI7 ps 

















RR tl m2 一 I 
机 
42 . __ 
i 二 一 gl 《2, 8) 
多 | 2 


市 在 其 他 储 形 , 则 p(y 一 xz) 一 0. 又 车 随机 徘徊 为 上 十. 左 寿 均 对 
11 





称 的 , 则 pi 一 一 志 ? 二 4 二 ;那么 当 2+ 307 《3 一 3) 为 侦 











数 时 
prty 人 
和 LEE 
Fi 二 号- 3 一 了 -| 1 
- (2.9) 
i177 一 1 


2. 3- 维 简 单 随机 徘徊 的 反射 原理 与 首 中 时 


本 节 市 ,我 们 只 讨论 1 维 简单 随机 徘 彻 , 即 设 4=1; 并 设 ww 一 
0( 从 原点 出 发 ), 兰 碟 二 首 达 yy 的 的 时 间 ， 
Tn = inf frst tw) 一 vy} = inf insé, tm) Fy}, 
也 称 了 为 首 中 时 . 现在 来 求 工 ,的 分 布 , 即 求 PT, 一 NY) ,这 里 也。 
的 下 标 0 表示 从 0 点 出 发 . 显然 
PAT = N=0 (Ny), 
PT C=) 二 及. 
对 于 N=w 的 情况 ,注意 到 
{wT wm) 二 Ny we) = ye yy NN, 
此 事件 是 [wiSxtw) 一 y} 的 - -部 分 . 当 NN 十 y 为 奇数 时 . 它 是 不 可 
能 事件 ,而 当 N 十 y 为 个 数 时 , 它 由 若干 个 概率 为 p gts* 的 等 
概率 事件 组 成 , 设 在 fw;tw(o) 一 yy 了,(w) < 二 N} 中 有 2 个 上 述 等 松 
事件 ,那么 
PAT Ca) = RD 一 Pesteo) = y) — Vp rig 
| N | | Ny Ry 
| ls "97 
这 7 个 事件 又 分 为 两 组 ,分 别 满足 条 件 
] 之 





ay Ey lw)—= yl: 
by Sv. 10w0) 一 y 一 1; 但 在 NN 一 1 前 前 到 过 y. 
Nl 
起 中 的 事件 {wordw to 一 十 1 站 AN ,| 个 概率 为 
pg 下 的 等 概率 事件 ,而 中 的 事件 由 下 面 的 反射 原理 5 引 
理 2 2 也 都 wy Co 一 十 上 中 的 上 述 等 概 事件 一 一 对 应 ， 


和。 
如 从 而 
因而 也 有 | ， vy wa 个 ,从 而 
i MN — 1 | 
2 |. 
vy Ny/2) 
于 是 当 y 人 0， 
"i | 一 1 | Sty Ny 
PtT,— N)C— | 2 _ P70 
Lity T+ N)/2) ey | N)/2)J 
yi} 六 | ee 


ONION + 2! 
综 上 结果 .我 们 有 以 下 定理 : 
定理 2.1 1 维 简单 随机 徘徊 , 当 ow 一 0 时 , 首 达 的 上 时间 
的 分 布 是 

















上 
Per -AN 二] (y+ NY/2! 
| 13 过 交 , 且 > 二 六 为 俩 数 时 ， 

0， 1y| 盖 六 ,或 其他 情形 ， 
(2. 10) 
引 理 2. 2( 反 射 原理 ) 由 口 出 发 ,在 时 刘 六 -1 到 wy 一 1, 其 向 
曾 到 过 > 的 全 体 轨 道 集 4 与 由 0 出 发 .时 刻 入 一 1 时 到 这 y 十 1 其 

间 萤 到 过 y 的 全 休 加 道 集 互 一 一 对 应 . 
证 明 ”如果 将 4 中 的 每 一 轨道 ,从 其 首 达 vw 时 刻 + 起 到 时 刻 
NN 一 1, 对 $==y 作 一 个 镜面 反射 ( 见 图 2. 1) ,就 得 到 -个 时 刻 和 N- 
1 时 一 $y 十 1 的 轨道 ,这 就 建立 了 4 与 万 闻 的 - :一 对 应 . 
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3 赌 徒 破产 模型 


设 某 赌 徒 有 赠 本 rtz 关 1) 元 ,每 周一 次 独立 地 以 产 的 概率 记 
1 元 ,以 9 一 1 一 户 的 概率 输 1 元 , 若 输 兴 则 必须 停止 . 若 此 大 下 决 
心 在 赢 到 本 利 共 2 了) 元 时 即 停 止 , 求 财 徒 的 玻 产 ( 输 光 ?的 概 
津 . 如 果 将 到 第 x 次 财 完 时 此 赌 徒 在 x 次 全 部 输赢 的 代数 和 记 为 
外 令 与 一 zy， 一 后 十， 网 5 一 人 :rz0} 是 - -个 简单 随机 徘 
To = inf {nyé.Cw) = 0}, 
Tw = inf {nyt Cw) 一 如 
它们 分 别 是 赌 徒 输 光 或 主动 停止 同 博 的 时 间 , 而 他 输 光 的 概率 是 ， 
HT 全 (Totw) 之 了 TT(w)) (P, 表示 而 一 工 ). 
注意 到 由 全 概 公式 我 们 可 得 ， 
PA) = prtl}+a ro 1}, (2.11) 
并 有 边界 条 件 
OO 一 1， MD) 一 由 [2.7 
于 是 ， 可 由 此 解 得 wz). 这 个 问题 同样 可 考 碟 得 更 为 -- 般 ， 即 
左 映 点 可 以 不 是 0， 而 为 一 个 值 ea> 一 ceo 而且 a 所 x+ 才 b. 令 
Pz) 全 已 CT Ca < 了 了 Ca))， 
它 仍 满 足 方程 (2. 11) 与 边界 条 伞 
14 





ga) 一 上， gphy = 0. 
为 解 (2. 11) ,注意 到 它 等 价 十 
PR FD pr) = gH 一 CT (2.12) 


当 p>0, 旦 p 隆 六 时 
pk 十 1) 一 pk) 一 | 
二 是 就 可 解 得 


了 一? 
P27) = >， (十 1) — gE)) + Pla) 
和 一 


如 


中 “上 
| (gla + 1) gla). 





= 3 | (pea 十 1) -一 g(a)) 4 g(a) 
ee 
一 [下 


其 中 是 与 无关 的 待定 常数 . 理由 以 人 一 0, 就 得 到 , 当 PKy 时 
下 


， Bl 


“一 一 [1 一 | 三 | 





从 而 得 到 : 当 pp 关 9 14 于 7 于 5, 有 


ce 人 


当 p=9== 记 ,由 (2.12), 我 们 有 

Hr -agat DD— pad) tA raatl. 
再 由 gl6) 一 0, 就 解 得 

a Ha) YY, Pr = Bra, (2.13Y 
从 上 面 的 结果 ,可 以 看 出 ,在 公平 赌 一 | 一 志 | 中, 如果 开始 的 由 
本 为 zz 元 , 须 望 谨 到 本 利 共 6 元 后 才 停 下 ,那么 ,他 输 光 的 概率 是 
C~z)/6. 呆 见 .如果 赌 本 相对 于 希望 赢 的 钱 很 少 , 即 +/5~0. 避 
么 他 以 几乎 为 1 的 概率 是 要 以 输 光 告终 的 . 当 畏 徒 希望 赢 到 本 利 
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上 二 





各 为 & 倍 于 赌 本 的 钱 方 轩 休 ,那么 他 能 达到 他 的 希 党 的 概率 只 是 
1 下 一-… 越 贷 心 就 越 可 能 输 光 . 
4 带 吸收 壁 的 随机 祥 徊 
说 5 4030 是 1- 维 简单 随机 徘 梨 , 令 
ro inf{fnyé, lw) & [a,b)}, 
Wy 一 Enric: 

意思 基 设 想 人 在 a,6 两 点 分 别 设 -个 上 吸 收 惟 ,粒子 天 达 &a 或 5 后 就 
被 吸收 而 永 迈 停留 在 那里 . 休 此 ,全 iy;x 半 0) 就 称 为 两 端 带 吸收 
绽 的 随机 徘 筒 . 若 只 在 - -个 点 & 设 时 吸 由 上 尽 , 即 令 

so A br (lw) (FF 0), 


那么 1 全 {732 祷 0} 就 是 一 端 吸 收 辟 的 随机 徘 彻 . 其 实 前 面 的 财 秆 
破产 问题 中 希望 赢利 有 限 与 无 限 黄 种 情况 就 分 别 对 应 十 这 两 种 吸 
收 壁 的 随机 人 徘徊， 
吸收 时 间 工 ,(w) 的 分 布 其 实 已 由 (2. 10) 式 给 出 ; 
PT, tw} Oo ND) = PT, jw) = N), 
这 是 因为 注意 到 答 单 随机 徘徊 是 对 空间 平移 不 变 的 ,因而 将 原 空 
间 向 左 平移 > 就 得 到 了 上 述 结 打 . 原则 上 





PRA Et) = 人 PT (ao) = N), 


B=|a—zx| 


但 上 面 右 端的 无 窃 级 数 求 和 需要 较 高 的 分 析 技 巧 这 里 我 们 绕道 
由 (2.13) 与 (2. 13)' 来 求 它 , 注意 到 上 式 等 于 
,im PT (Cw) < Tl)) 
{因为 PrClim Tstw) = ToDP (Tm) br)=1), 
To Ho = PT EY < lim To tw)) 


-的 


Pd 





1 
这 里 pg 当 且 仪 当 A> 误 ， 
AS2.2 Brown 运动 


1827 年 英国 生物 学 家 Brown 在 显微镜 于 烛 测 液 血 上 的 花粉 ， 
发 现 花 粉 的 微粒 作 着 上 总 度 不 规则 的 运动 . 但 是 直到 19 世纪 末 , 人 
们 才 清 楚 这 种 奇怪 的 现象 是 由 于 花粉 微粒 学 色 大 卉 液体 分 于 的 无 
规则 磁 撞 造成 的 , Einstein 对 此 现象 首次 作出 理论 的 ,时 化 的 分 
析 ， 本 节 特 介绍 Einstein 分 析 的 梗概 , 另 方面 ,Brown 运动 又 可 
以 作为 随机 徘徊 的 “极限 * 纯 数学 地 得 到 . 这 个 认识 Brown 运动 的 
途径 不 仅 简 单 而 冯 观 ,也 为 Brown 运动 及 与 它 有 关 的 随机 过 程 及 
随机 往 分 方程 近似 计算 提供 了 基础 . 这 个 作法 的 直观 思想 由 法 国 
数学 家 Bachellier 首先 提出 ,此 后 Kolmogorov 关于 马 氏 过 程 类 型 
的 随机 过 程 理 论 很 大 程度 上 是 基 十 这 种 想法 的 . 本 节 也 给 出 这 种 

Paul Levy 从 1910 起 数 十 年 的 工作 ,对 Brown 运动 的 研究 有 
着 深远 的 影响 . 他 的 著作 4#Processes stochastidues et mouvement 
brownien 》C1948 年 第 一 版 ,1965 年 第 二 版 ) 至 今 仍 对 这 方面 的 研 
完工 作 有 许多 启示 与 参考 价值 . 在 Levy 早期 工作 的 基础 上 
Wiener 第 -个 (1923 年 ) 严 格 地 给 出 Brown 运动 的 数学 定义 : 构 
造 出 了 -个 概率 空间 (Wiener 空间 ) 及 其 上 的 随机 过 得 来 刻画 E- 
instein 的 物理 严格 意义 下 的 Brown 运动 . 因而 Brown 运动 也 叫 
做 玉 Wiener 过 程 . Wiener 的 论文 “Differential space”,]. Math and 
Phys. 2,131 一 174 是 Brown 运动 研究 的 里 程 碑 . 可 以 这 样 说 ,由 
Einstein 首创 的 Brown 运动 的 数学 模型 ,由 Levy 与 Wiener 大 大 
地 发 展 深 化 了 . 至 今 ， 由 于 大 量 的 数学 家 与 自 然 科 学 家 的 工作 ， 
Brown 运动 及 其 泛 函 的 研究 不 断 深入 发 展 , 它 己 成 为 随机 过 程 的 
两 大 基石 之 … 它 不 仅 渗 活 到 偏 微分 方程 .调和 分 析 、iF 算 方法 、 控 
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制 等 各 数 堂 筑 域 ,上 而且 在 千 物 . 化 学 .物理 、 万 学 .工程 .经 济 管理 、 
金融 等 学 科 中 Brown 运动 也 成 为 不 可 缺少 的 研究 工具. 它 是 “ 唉 
"与 “ 涨 落 ”等 陆 机 现象 的 典型 ,并 提供 处 理 的 参 薄 模式 . 
1 Brown 运动 分 布 的 推导 

本 生得 到 Brown 熏 动 分 布 的 分 析 方 法 本 硕 上 是 Einstein 的 
方法 : 伺 为 了 避免 解 偏 微分 方程 ,我 们 对 分 布 密度 计算 改 用 其 特征 
函数 . 

按照 Einstein 的 分 析 ,一 个 Brown 运动 是 形 示 一 个 随机 运动 
善 的 粒子 在 时 间 [0,tj 上 的 位 称 及 ,显然 B, 二 0, 粒子 运动 应 有 以 
下 性 质 ; 

1) 粒子 位 移 的 各 分 生 都 相互 独立 . 我 们 不 妨 只 考虑 其 - -个 分 
最 , 仍 记 为 18.}. 而 且 对 任意 豆 不 相交 的 区 间 [gr sm) [ss yt) ert、 
[so 有 BB ,Bo 一 BB 一 B, 都 相近 独立 ， 

2 运动 的 统计 规律 对 空间 是 对 称 的 ,因而 

EB,= 0. 

3) Bts 一 Bi 的 分 布 与 六 无 美 ,并 晶 oD 人 E(B 一 B.)? 在 
在 ,而且 是 1 的 连续 函数 . 设 8, 的 分 布 密 度 ( 我 们 假定 密度 存在 ， 
否则 就 要 用 测度 论 工具) 是 pCz,7), 令 

PT A = [esp sd 








all) = E(B = [ipt zd (EB, = 0), 


于 是 由 上 述 性 质 就 可 以 知道 
os E(BE) ~ E(B — BB — BB) 
= E(B,,, — Bi) ECB?) 《用 号 一 和 与 (1)》 
= als) 二 《 因 B14, 一 B, 分 布 与 1 无关). 
又 由 于 gC) 对 4 连续 ,由 数学 分 析 的 分 析 不 难得 和 
18 


ot) 一 万 ， 
其 中 已 是 -个 舍 定 常数 ， 它 是 单位 轩 癌 中 相 天 六 广 位移 的 均值 
了 岂 称 扩散 常数 . 在 分 子 运 动 学 物理 中 亡 示 


Dp gr (2. 15) 
其 中 及 是 和 由 分 于 的 特性 决定 的 一 个 普 适 遂 整 ,了 大 绝对 温度 ,六 


是 隔 弗 有 昌 德 元 (Avogadro》 常 数 ，// 证 内控 系数 42，15)》 可 内 
理论 分 析 得 到 ， 总 与 实验 很 好 地 符合 ， 这 里 我 及 略 去 这 … 物 理 推 
导 ， 
再 利用 17 宁 3?、 我 们 得到 : 
PT 一 Me 
一 Fle (ed, 17) 
一 天 (CEA Ke) (et, KY 1)) 
一 (ev Ee 1 (独立 性 ) 
一 下 Ce) 本 (ea mi 一 


LA ) 


一 全 Ce — 1). {2,16) 
注意 到 估 汁 式 ; 
e 二] 十 iv 一 ofr), 
我 们 有 


Ete — 1) =iAEB, — AEB: 十 olEB:) 


一 一 SXats) ots), 

对 (2.16) 两 端 除 以 :并 令 sx0 便 得 到 ， 
法 Ce 一 一 Xp AD, 
这 是 对 上 的 一 个 常 微 分 方程 , 解 这 个 方程 得 到 


FEA) 一 De 
再 注意 到 





EDA) = Ele my — 1 


就 有 
en 2 | > 17) 
AL AY = TO | op 《2. 17 
可 见 B, 的 分 布 是 入 C0.De0, 为 了 方便 忠 见 ,数学 上 我 们 请 适当 单 
位 使 记 一 1. 
上 是 由 中 蜂 得 到 ;有 .如 .一 B ,如 。 如 的 联合 分 布 是 各 
让 十 的 最 1 因而 庆祝 Brown 运动 在 任意 有 限 个 时 刻 的 联 
[i 合 分 市 上 i 
PiwH, < di "~ 4) 
| — Ey ‘da, 


“一 一 一 





2 1 》 


于 是 , -一般 邮 Brown 运动 可 定义 为 ; 

定 六 2.1 Brown 运动 是 一 个 随机 过 程 站 = ;rz0) ,满足 ， 

如 T) 独立 增 荆 . 即 对 任意 豆 木 相安 的 个 区 闻 [ fs， 
ss [str) ,其 上 二 的 增 量 吕 一 有 23 部 相 
耳 独 立 ， 

五. 2) Bs 一 上 ; 遵从 均值 为 0, 方 差 为 1 的 正 态 分 布 N(0,1)， 

有 .3) 对 每 - -个 名 ,及 (Cw) 是 1 的 连续 峭 数 . 

事实 二 ,6.1) 与 已 2 已 完全 决定 了 喇 的 任意 有 限 维 分 布 , 也 
就 决定 了 上 8 的 分 布 . 要 求 B. 3 成立 是 由 于 六 表示 粒子 在 [0,1] 的 
位 移 , 央 而 应 对 上 连续. 这 一 性 质 不 能 由 BB 的 分 布 决定 ,但 是 可 以 
证 明 满足 8.1),8.2) 的 随机 过 程 ,在 其 概率 空间 8 中 除 友 -一 个 过 
概率 集 外 的 任 一 轨道 w,B.(w) 都 是 1 的 连续 函数 ( 见 本 章 附 录 】}. 


2 Brown 运动 作为 随机 徘徊 的 极限 
另 - 个 简单 而 有 用 的 对 Brown 运动 定义 的 理解 旦 ;把 它 看 成 
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(2. 18) 





亲 种 意义 上 对称 随 机 徘徊 的 茶 种 极限 过 程 . 这 种 理解 的 好 处 大 ;人 它 
不 仅 简 单 而 直 戏 .并且 可 为 过 续 参数 的 随 视 过 程 Brown 运动 的 数 
值 计 算 匀 嵩 和 艇 化 提供 参考 . 考虑 个 对 称 的 泡 限 制 的 随机 徘 和 5 
-和 未 一步 及 的 单位 时 间 是 各, 步 上 是 x, 那 
么 它 走 一步 -和 均 位 稳 是 0, 其 卢 差 是 C&A ,基站 时 间 #x 近似 
上 广东 . 寻 7 的 平均 位 移 全 为 0, 广 美 是 (A1)7 一 


(A. 天 正当 sc 时，- 般 来 说 下 玉 ( 时 间 4 工 中 的 位 
移 ) 不 会 得 到 和 有 有 总 广 的 极限 ; 








rr》 一 和 rsf)ary. 


df 


ga 硫 wDA 时 .由 PeMotvre( 德 莫 弗 ) 或 中 ， 心 极限 定理 就 得 到 ， 
[可 各 
in 
(这 里 我 们 不 失 般 性 地 取 帮 一 1)., 于 是 ,作为 随 宙 徘 箱 的 极限 . 
Brown 运动 在 仁 意 一 个 长 为 的 时 间 区 间 中 的 位 称 应 为 压 态 分 布 
和 NOOO. 让 的 随机 变量 . 此 即 在 二 段 r Brown 生动 定义 中 的 号 2) ,区 
由 于 随机 徘徊 就 是 独立 增 基 的 , 它 的 极限 当然 也 是 独 立 增 基 的 . 这 
样 我 们 就 又 可 以 把 Brown 运动 看 成 是 当 “人 =D(= 时 ,一 
0 意义 下 的 极限 (这 个 极限 过 程 的 确切 含义 就 是 3 2,3 中 的 不 变 原 
埋 ). 

3. Brewn 运动 的 简单 性 质 


定理 2.2 设 随机 过 程 { 信 ,12>>0} 满 足 名 二 0; 则 伺 具 有 Brown 
分 布 当 且 仪 当 它 起 Gauss 系 ( 即 任意 有 限 维 ( 联 合 ) 分 布 部 是 
tauss 分 布 }. 而 月 ES =0, Et) =r hs. 

证 明 必要 忻 ， 显然 ,具有 Brown 分 布 的 随机 过 程 是 
Gauss 条 ,由 EE =0. 史 


-da 





1 - + 
hm J ne) < 1= 一 | 
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FEE) =IECG FE- (9 


一 ts -|i A. 
爷 分 性 : 当 条 件 成 立时 ,我 们 有 
Elé, — t= 0, 
天 (人 EA 上: -| 
BES, EVE EI 
0 
网 EN 人 由 于 Gauss 系 中 有 限 个 随机 变量 的 不 相 
关 性 就 是 独立 性 , 国 而 对 下 V | 
有 名 一 总 一 所 相生 独 辽 ,这 就 说 明了 所 具有 了 Brown 分 布 . 
定理 2.3 没有 3 和 全 是 Brown 运动 .那么 以 下 各 过 程 均 为 
Brown 返 功 ， 
1) {Bt 0}; 
C2) {Bi — Bit D0); 
C3) [B20] CA 0), 
外 st 全 0}( 其 中 4 大 示 4 的 示 性 精 数 ,1 二 0 时 
4037 理解 为 0)， 
(3) {Br BO RET 
证 明 由 定理 2.2 及 以 下 各 式 ,(1)~(5) 的 结论 显然 威 立 ， 


1 


E(t(— By=E 一 一 EE| 二 
(HT EB Ba) = 并) = Ext 


= EtB, — B,) = 0, 
El BIC BD -= EBB} = AAs, 
ECB,,, — BCB,,, 一 1 ) 
A i 
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1 ， 1 1 1 、 ， 
AB Oo 一 
EE A Bl | 1 
六 | - A pA. 
Ett BB B10) 


TAT OO 
Ns 


3 2.3 不 变 原理 与 Brewn 运动 的 性 质 


i 不 变 源 理 

在 上 季 中 ,我 们 看 到 当 步 长 Ar= VE 时 ,随机 徘 制 各 6 ay = 
人/ V7 | 取 直 一 | 以 Brown 运动 为 极限 . 其实 这 个 事实 可 以 
推广 鳃 般 的 随机 徘徊 . 即 有 以 下 的 泛 函 中 心 极限 定理 ,意思 是 ， 
相应 于 随机 变 基 的 中 心 极限 定理 ,这 里 旦 考虑 随机 过 程 的 相应 定 
理 . 男 一 方面 ,由 十 极限 的 分 布 与 生成 随机 徘徊 的 随机 变量 无 关 ， 
因而 此 定理 又 称 不 变 原 理 . 

定理 2. 5 泛 函 中 心 极限 定理 ) 设 {7,,n 之 1}) 是 ii.d. (独立 
同 分 布 ) 序 列 ,Ez, 二 0, 方差 为 1, 则 当 n 一 十 吕 时 , {x 四 :这 0) 或 
(x4? :>0} 也 按 分 布 收 伊 到 标准 Brown 运动 .其 中 

















~ 3 | 
ep 友之 的) = ri/ A | 其 实 -= -名 |， 
而 
本 __- €, | (nt 一 wl 
"二 Vt mt 一 [nt]) = J (1 > 0) 


(其 实 ,zt" 是 将 点 Tri wm 二 0,1,…} 用 折线 联结 而 得 到 的 确 数 )， 
定理 中 " 按 分 布 收 误 ”的 意义 需要 有 测度 论 的 知识 才能 严格 讲 
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清楚 , 这 里 我 们 粗略 地 解释 rm" 按 分 布 收 艇 到 睛 :对 任意 连续 国 数 
空间 CT0. ro- 上 的 有 界 连 续 泛 表 /随机 变量 f(r") 的 数学 其 
望 收 仇 到 挛 呈 的 数 守 期 音 人 严格 的 定 交 风情 起 在下 "的 收敛 
性 有 昌 不 能 按 上 面 解释 ,但 份 可 理解 为 任 龟 样本 的 有 界 过 续 泛 丽 六 
在 /Ke ) 的 数学 期 盟 收 笋 到 /C8) 的 数学 期 望 ，- 般 地 , 它 红 含 了 
< 的 有 限 维 分 布 收效 到 吾 的 有 限 维 分 布 - 

对 士 随 机 阿 和 时 Re yy 训 太吉 (一 Cr 而 及 
Fe 天门 , 那 妇 定理 2. 3 对 于 随机 向 晶 依 热 适 用 ,只 是 这 
时 极限 是 :个 她 维 的 Brown 运动 站 ,所谓 df- 维 Brown 运动 , 指 - 
个 4d- 维 向 他 值 的 随机 过 各 B= iB yi 守 01. 8B 一 (B00 ,By， 
4B {BY 是 相生 独立 的 - 维 Brown 运动 . 这 也 等 价 于 下 面 

定义 2,1 将 定义 2.1 中 8B,2) 政 为 

B.2) 一 上 是 遵 人 其 0 均值 , 归 为 协 方差 阵 的 正 态 分 布 
(其 中 并 表示 民 阶 单位 阵 ? 的 随机 向 量 ， 


2. 非 对称 的 随机 徘徊 的 极限 一 - 带 漂移 的 Brown 运动 
对 非 对 称 的 简单 随机 徘徊 ,或 EX, 二 y 关 0 的 一 般 随 机 各 个 ， 
my/ Vn 的 概 限 是 什么 样 的 呢 ? 事实 上 考虑 
Et A tt: — [nt Jy, 
则 由 定理 2. 5 有 看。i/ V7 收 第 到 Brown 运动 己 , 那 么 当 pe (jp 
- 人 一 并 时 有 想 限 ， 





lim xr Ya vn = 
于 是 Ed vn 一 Ef vn 十 Lane pr vn 的 极 腿 是 B+ br, 记 为 


BB 人 {Bit 这 0) 称 为 一 个 带 漆 移 的 Brown 运动 , 它 具有 -个 党 
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数 5 的 漂 覆 系数 
3. 应 用 于 首 中 时 及 击 中 分 布 计 算 
利用 定型 2.5 及 简单 随机 徘徊 有 尖 首 中 村 等 结 昌 可 以 很 快 得 
到 Brown 运动 的 相应 嫩 果 . 令 训 = 二 1B,;1 宇 01 是 标准 Brown 运动 ， 
满 是 B, 一 0 "YD, 下 
Tt A nfiisB, 一 多) 一 in 《2 193 


CT ~ 


人 
一 inffnie 一 [yw 0 或 1). (2,20) 


加 风光 
定理 2.6 Dir 二 {aORp), 


Pim) = 


(0) 
pO—ua 


Pin 0 一] (任意 小 )， 


、 2 人 
Prlr, 一 "一 [a zd 
T Jn 
2 |y| 过 [expe-- 2 /2 Yd, 


直观 证 明 用 测度 论 与 涝 销 分 析 的 知识 可 以 证 明 本 定理 所 要 
求 的 各 概率 均 为 .的 有 界 连 绪 汉 阔 的 数学 期 望 ,所 以 亲 由 {人 } 
渐 近 地 替代 z,, 于 尾 由 (2. 13)'， 

1° im) 

iv 6 


ov] 一 [ev ba 
2 ”大 (< 十 cc)== lim Ptzms<r 一 1 
st 





3° Pl Pn {TT ). 


4” Pr DB yyY sD) =limP (re vy SE ) 
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一 im SRY sD) = limP (Tm Tat)) 


-im 三 | ”2 
ra 
其 中 zz 一 [VR w=0 或 1.m 十 z 为 偶数 ,由 Sterling 公式 
Hil = voxe “pl 十 of Cm t+ 20) 1), 
我 们 有 
I pi ] 


Pa 


| 2 。 
Hm + ey | 


nl 


站 








> | 
一 J Mm ers e 
| 二 之 | | 去 
江 | (1 二 of1)) 





| 2 a | 了 才 之 2 | 
一 /2m ‘zexp| 一 > 一 log| ] 坏 了 | 





~ 





;log|1 一 全 jjG ToGD， 
-V2 ixexp| - 三 了 oj 工 | 
Em ‘zexp| 一 3m 0| 喜 | | + od 


-2 expbl 中 
Na” exp, — 2] (1 + 001)) 


2,. » 
二 /2 (Cnt 十 2 下 ?一 这 本 Y 


2 
Yn 


2(2R LL ney 





x exp| — | (| od)) Gn = [nj + 2k) 


1 /2 ,28) | | 
ny 元 | 7 十 了 | | 2 + | oD). 
' rl | 





对 v0 的 情形 .很 容易 得 到 相应 结 


4- 最 大 值 分 布 及 其 均值 
由 于 对 yn0 与 标准 Brown 运 


4 :maxd, < < y) 一 


我 们 得 到 .一 max 已 的 分 布 函数 ， 





PC A PonaxB, & y) 一 -V2 让 du 


da rr 


MMi 的 分 布 密度 可由 Fw (y) 得 到 ， 


uty) elyz 


| 


LM = |» V2 qdy = 


5. 反正 弦 律 的 直观 推导 


令 


YA supli:0 i 


那么 7 是 BB 在 时 间 1:- 1 前 最 后 


2& ， -| 
本 exp | ?| ;二 2 . 
1 
[2.21) 

运动 如 ,有 
= {wr (wm) D> 1), 
- Em ¥ 人 Ds 
六 af 一 /2 

(2. 22) 


A 1 ,23, 一 有 ， 


次 到 0 的 有 时刻. 如 果 令 及 一 总 |- 
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.那么 8 一 18.;1 这 1 守 0; 就 是 8 在 [0,1] 上 的 时 间 倒 逆 过 程 ,由 
定理 2.4 的 5),8 仍 是 标准 Brown 运动 .在 B, 一 y 的 策 件 下 ， 
1]- Ylw) 一 inf it :13 一 yf, 





由 (C2) 式 
Pel Yieo) Bo y= Plr, HB, 0) 





好 Xe 的 条 件 密 度 是 -这 Le sm 一 中 ,于 是 由 全 概 公 起 

有 EL 二 TD 一 六 十 dB 二 0 
一 | ee [it dB, = 0B = ypl0, ydy 
(其 中 pir,Wdy = PB E (yy + dy)|B, = x)) 














已 (rn Et dil tp(t,0.0) 
=| BU yo pll.0,y}dy 
上 ly 和 全 去 
一 i 1) dy * dr 
| _ J [a win 2 了 人 
1 
LT BY 
即 x 的 分 布 密度 是 一 二 二 = 7 的 分 布 亢 数 昆 以 下 反正 弦 律 ,因为 
” 1 2 2dy 一 
POY) —di= | 2 Cy 7) 
和 rwt(l £) 1 


2 . 
esn W 


Y2.4 应 用 一 一 自由 连接 高 分 子 链 的 构象 分 析 


高 分 也 科学 中 , 链 物 象 的 研究 - 直 占 中 心地 位. 自由 迷 接 链 
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基 物 理化 学 家 们 用 简单 模型 来 代 才 真实 大 分 和 于 的 一 个 重要 的 处 埋 
方法 . 由 此 异型 去 发 现 橡皮 高 弹性 与 构象 之 问 的 关系 ,去 解释 商 分 
子 深 液 的 和 度 等 :系列 问题 ,得 到 了 高 分 子 理论 中 许多 重 昌 和 山 含 
与 理论 . 这 里 我 们 就 其 基本 模 夏 与 概率 思想 作 -一 简要 的 介绍 ,以 示 
概率 论 ,特别 是 与 本 章 有 美的 结果 可 如 何 应 用 于 实际 剖 题 . 

所 谓 日 由 连接 向 分 子 链 ( 简 称 白 由 链 ? 是 指 大 分 地 是 由 一 些 不 
器 体积 的 刚性 的 长 为 : 的 键 相继 自由 地 连接 起 来 的 . 因而 每 -个 
键 在 空间 的 方向 与 前 曾 的 各 键 的 方向 者 无关 . 将 第 上 个 键 的 方向 
记 为 xt, 二 是 fersk 室 1} 是 独立 同 分 布 的 随机 向 量 序 列 , 商 和 且 沿 各 
方向 分 布 光 外. 若 大 分 子 共 # 节 ,那么 第 7 个 键 的 末端 所 在 位 置 
《高 分 统计 中 称 之 为 末端 距 ) 是 ， 

S00) Eo) HO)) = Sr). 


= | 


























ZY 《CC se rt (Ce) ), 


其 中 4 一 2 二 3, 分 别 表示 链 是 在 平面 与 空间 中 伟 展 . 由 对 称 性 
Ex — 0O, Elrel: = 1, Fee 一 E| afpzp| “0 


而 令 





CFElé ln CC (Gn > 十 ee) 
在 高 分 子 构象 分 析 中 C- 是 表征 高 分 子 刚性 的 标志 . 例如 完全 伸 直 的 
链 ( 记 为 C) ,意思 是 各 链 在 连接 时 必须 完全 从 言 ,不 能 栖 曲 ;这 时 
lim ?nw 一 十 oo. 但 自由 链 的 均 方 未 问 
凶 电 EE | =n | zr 二 28, 即 CC ,= 二 1, 可 见 C 越 大 ,硬性 越 大 . 
VE 和 下 一 (nf) * 称 为 均 方 根 末 端 距 本 节 研 究 自由 刍 在 空间 硒 上 
延 律 成 为 一 个 “ 线 几 ”的 形态 的 特征 参数 及 其 渐 近 计算 G4- 3) 
1 末端 分 布 


注意 到 (下 和 十 Cr 一 1 那么 由 各 方向 分 布 均匀 性 得 
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1 = Er + dE 
即 EC ,1/4 侧 生 Cd) 一 00 天 让 因为 在 单位 于 或 加 
上 均匀 分 布 ). 当 nL at 时 ,由 定理 2. 5( 对 向 量 值 跑 机 过 程 用 定理 ) 
就 得 到 (6 的 分 布 收 颌 到 Cc， BB 的 分 布 ,其 中 
‘二 » Er = ara. 
也 而 沿 n 时 
PU a ry ED Et) 


~- | 和 do -de 
-vs -2 (v2n/aday! 
特别 地 , 当 a 一 -2， 


PE S40 扑 <»w~| | PC dudo; 








mea 
当 人 一 3， 
已 人 se rll EE yD A x) 
exp| 一 Cu 二 | 
~ -一 一 dacdvdrer; 
| 于 上 Ai 


2. 自由 链 平均 末端 距 


A | Bt + | 
二 | 一 | | 上 uo tw dudvdre 


(CV Zr da) 
-一 3 一 一 8 “了 
Ee 3 (人 


3. 自由 链 Gauss 线 团 的 形状 {4 一 3) 





为 了 表达 自 出 链 信 汉 二 11.2, 到; 的 形状 . 措 们 吓 以 着 虚 它 
在 芳 二 个 位 置 的 联 会 分 布 . 例如 考虑 第 .7.… ,i 个 键 的 末端 的 
伍 昨 的 联合 分 布 密 度 可 由 以 下 正 态 分 布 密度 近 们 (tn 一 | 


3D 


a 





让 1 让 


pr oe) 


I 1 区 V2 ~ Yh 
中 ， exp] FT i | 3 mre T 1 j 1 

， 3 zr, 
-- cxp| > 2 一 3 | fl 1 \/ Tiny re Dj 


由 此 我 人 还 串 进 一步 得 到 关于 日 出 链 卷曲 成 的 “ 妹 团 ”的 形状 的 --. 
些 特征 数 ,例如 

1 遇 铀 癌 定 在 但 ,0.0) 及 (C0,0,8) 的 自由 链 的 第 jy (上 寺中 
a 个 键 终 点 的 伍 置 部 全 (riew) ev(w) ,ztw)) 的 分 布 密 度 


_ Pr at Dlr Uy + 
TY) 一 po pr ， 








其 中 必 一 人 007 二 (0 0. 有)， 


、 LE 1 

exp| - 2 站 [= 1- 和 | A hd | 

1 1 由 

rv 二 | -2 


[VEwa - - 7}- 


由 此 容易 求 出 该 点 坐标 的 均值 为 | 0,0, 让 | .坐标 的 均 方 人 为 
下 (人 有) = Ely oo jn DE/an. 
Elztoy) = jn — isnt ChinY, 
Ei = yn pin Ch nny, 

这 个 结果 首先 由 化 学 家 Katchalaky, Kuenzle 与 Kuhn -人 直观 

地 得 到 5 见 JPolym。 Sci,5,P283(1950)). 
2* 平均 戴 面 凡 十 

在 遍 分 子 化 党 中 你 (| ?一 (nt)1: 为 链 的 卷曲 线 团 的 均 

方 根 长 度 , 由于 自 由 链 的 分 布 是 各 向 同性 的 ,1* 中 的 分 布 中 可 特 = 

轴 选 作 首 末端 的 连 线 . 于 是 第 j 个 链 的 未 端 到 链 的 连 楼 首 来 端的 

8 人 《互生 全 











一 【2 ia) {0 1) 
对 在 L0.nj 中 的 最 大 什 是 G846) 7, 它 可 以 看 成 此 链 的 状 曲 线 团 
的 "党 度 ” 

3 自用 链 在 给 定 方向 的 平均 最 大 投影 . 

有 些 化 学 家 认为 除了 上 述 有 关 线 团 的 平均 参数 外 , 需 普 虑 一 
些 最 大 尺 才 的 平均 值 . 例如 对 - -个 给 定 的 方向 *, 问 线 团 在 这 个 方 
同上 的 投影 (最 大 ) 长 度 是 什么 其实 就 必要 求 ， 

XA Elmaxé, "€ min 。 e). 
如 前 ;我 们 用 Brownai 运动 (CB ,0 过 让 来 近似 1 1 Om 
池 1) 





Xe ElecmaxBs*e— e¢ min B, €), 
由 于 吾 . 在 * 的 正 负 方向 是 对 称 的 ,而 且 0 Men Bl. “与 
一 min 8。 ，c 同 分 布 .因此 和 
Xo cE(maxB, « e). 


另 一 方面 8 会 {BB * ent 之 0} 仍 是 一 个 一 维 标准 Brown 运动 


这 是 因为 无 非 是 B 各 分 量 的 线性 组 合 ,所 以 8 仍 归 独立 增 量 
的 Gauss 过 程 ;而 日 
EB — Bl 
一 下 [5 号 0 _ 2 十 (CB? By)?e? 十 (CB 四 | 
= (ft— DEIel: = (0 — ss), 


从 而 , 按 标准 Brown 运动 的 定义 五 是 1- 维 标准 Brown 送 动 . 进而 


我 们 由 (2. 22) 得 
五 [ maxa) = EM -2, 
bt 


Xa 2cE! maxB,) = 2cEM, = ?ec V2 
Ee 


于 是 我 们 要 计算 的 
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a Js 只 VE (Cnty == 门 。 中 CE 2 
3 
下 式 的 感恩 是 在 从 证 方 疝 的 平均 最 大 投影 性 根 表 端 是 的 0.9 
倍 , 线 团 是 约 在 一 个 长 (nL21* 宽 0.9 们 于 长 的 范围 中 , 


$2.5 基本 更 新 定理 


1. 独立 间 分 布 列 的 wald 等 式 


引 理 2. 34CWaid 等 式 ) 设 {ty 为 存在 期 户 的 独 羡 同 分 布 
列 , 叉 设 正 整 值 随机 变量 入 与 ft 的 发 展 一 致 , 意 即 对 nn, {NN 
< 只 技 町 or 5 从 而 与 mr 独立). 并 是 我们 再 设 
EN 一 so 那么 


mv 
El > rsj 一 EN. Er, (2.23) 
k=1 


证 明 1 宪 包 二 1- {NN 过 大 一 1) ,由 假定 应 该 与 Tl 
:独立 .于 是 5 记 志 ;为 1 } 的 示 性 国 数 ) 


El > 一 B nlsn) 
- DE) 《级 数 绝对 收敛 ) 
Per Eliw， 《独立 性 ) 
本 Br P(N 之) ( 同 分 布 ) 


= Er PN Dk) 


= Erl* EN. 
定理 2( 基 本 更 新 定理 ) 设 {rc,} 为 正 值 随 机 变量 列 , 又 设 N， 
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由 上 上 怀 定 芝 


™, ~ | 

Sr i Dr 【2 24) 

4 1 一 

耶 么 

,1 (2. 25) 

Er,. 
证 明 竹本 十 痘 玉 ， 满足 引 理 2 2.3 中 关于 的 条 件 . 并 家 上 

NC (ji 1 Sn Sf Dn) 。 
了 和 1 一 


天 起 让 ， -1 1 S HY 二 1 Et 一 ] 1 汀 依 T] 从 与 To 
独 六 对 人 224 下 于 不 等 式 当 Er < 时 .用 Wold 等 下 得 到 

i Er(EN, + 1), 
时 此 当 Er, < x 时 有 














,EN, ~ 1 2 0 
Jim 六 Be (2.26) 
i 
or Ji, rs A; 
[Mm. 当 却 守 时， 
Er 1rse9 作为 多 芯 癌 分 布 列 , 记 N, 满足 ， 
We 1 
> 器 Te. (2. 24 
上 1 
最 岂 NN 六 由 于 me 村 及 (2 24 六 我 们 有 
1 
2 m+ ‘2, 27) 
业 一 上 


对 此 用 Wold 等 式 得 ， 
Er ENM LF Dr 
从 而 
TEEN, 十 yr 





令 M ，. 便 得 
，- Em, 1 y . 
-i 《2 28) 
lm pr 


于 于 地 .当天 rz， 时， 出 芋 式 推出 
| | 





8s2.6 附 录 


1 有关 Brown 到 动 及 随机 徘 筒 的 乌 开 性 方面 的 问题 ,我 们 将 
在 马 民 过 供与 扎 红 链 的 有 闫 音节 中 去 兽 述 . 

2. CDeMoivre 极限 定理 ); 设 i 一 1.2,…'! 是 相 征 独立 
则 分 布 随 机 变 玫 出 ,Pix 一 一 piPtite)— -1)=g=1 一 


pp 今 S, Din 


-i 
- 1 .人 一 人 好) 1 人 站 
laf b| 一 -一 -| 3 dr 
扩 1 wp i I 站 


此 定理 是 定理 2.3 的 特殊 情况 下 的 部 分 结 

3, 定理 2.3 中 与 x" 收 化 到 标准 Brown 运动 的 含义 是 明 
收 误 { 或 称 搂 分 布 收 敦 ), 在 此 ,我 们 给 出 其 严格 定义 :进一步 的 内 
穿 可 参见 钱 租 半 , 蒜 光 便 :《 随 机 过 程 沦 } 及 Billingsley ; {Conver. 
gencee of Probability Measures }. 

设 有 度量 空间 9, 是 包含 吧 的 所 有 开 子 集 的 最 小 = 代数 . 
在 可 测 衬 机 (7 上 概率 测度 fi 一 1，2， 与 w, 称 jp 允 收 笋 
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到 gy 如果 对 ECCQ} 有 
lm [fede) 一 [eade) ， 


其 中 Ct2) 是 吕 一 把 的 全 体 有 界 连 续 泛 国 的 集合 :CC 一 人-> 
R, 7 在 愉 连续;. 面 / 连 续 的 意 尽 是 Y wu. (ns 之 1)eE 了 ,由 jiman 
一 外 有 ]im re 一 了 (oo)， 
例如 
位 C00, 十 oo 1 一 {f [LD， 十 me — R}, 
ptf a) 一 suP | .Cr 一 gr) + 
IFIOnYy 


是 - -个 度 是 空间 .ww En, 令 全 fo OHA 写 0}, 刚 wrwm CEN.> 
二 09) 当 且 仅 当 连续 函数 w 在 任意 闭 区 间 上 一致 收 仇 到 连续 函数 
4 容易 看 出 对 杆 a 维 连 续 消 数 p, 当 fo) gv) ,w() ,1， 


(6) Cs 时 ,六 oo) 一 定 是 -个 中 上 的 连续 活 函 . 1zm 的 收 笋 
可 看 成 在 如 =C[Lo, 十 ce) 上 的 弱 收 敏 . 

对 例如 人 =DD(0, 二 oo)= {w= (wt0) ;w(t ) 是 右 连 续 
有 左 极限 的 函数 }. 可 在 其 上 定义 距离 (Skorohod 距离 ?而 成 为 一 
个 度 基 空间 . 在 和 2. 3 中 xz 就 是 定义 在 这 个 空间 上 的 ， 因为 
ze 的 可 能 轨道 是 阶梯 函数 ,因而 tx 的 履 伍 可 看 成 如 一 
DOO; 十 上 的 紧 收 名. 

4 本 章 2.4 中 自由 连接 高 分 子 链 由 蓝 名 物理 化 学 家 P. J 
Flory 首创 ,是 高 分 子 物理 化 学 中 基本 而 影响 重大 的 模型 . 由 此 ， 
还 有 - "系列 更 复杂 更 接近 实际 高 分 子 的 模型 及 更 深入 的 结论 . 本 
章 内 容 参 考 吴 大 诚 ,高 分 于 构象 统计 理论 导 直 》- 书 . 

5. 由 定义 2. 1,Brown 运动 的 轨道 应 该 是 连续 的 . 但 车 按 
Kolmogorov 定理 构造 遵从 Brown 分 布 ( 即 满足 8B. 1) 与 8. 2)) 的 
随机 过 程 8, 并 不 能 立即 自 然 得 到 对 几乎 所 有 的 胃 道 %, 8 Cw) 是 

3 


过 











连续 盟 数 . 但 可 以 证 明 这 个 结论 是 正确 的 . 不 仅 如 此 ,还 可 以 证 节 
对 几乎 所 有 的 轨道 ,号 .ko) 对 每 个 时 间 上 对 时 间 的 导数 都 不 在 在 
《这 正 符 台 Brown 运动 的 物理 直观 ;粒子 每 时 每 刻 都 在 收 变 运 动 
方向 ) 关于 Brown 运动 的 轨道 性 质 还 有 一 系列 更 这 刻 的 结果 , 读 
者 可 参见 钱 敏 焉 , 苞 光 和信 以 随 机 过 程 论 》 及 P，Revuz 与 M. Yor: 


FContinunus Nartingales and Brownian kotion 3 


习 题 


1. 在 简单 对 称 随 机 徘徊 中 , 设 5 为 从 第 » 次 开始 连续 问 右 
走 的 次 数 . 求 LL, 的 分 布 . 
2. 设 钱币 出 国 微 的 概率 均 为 ,每 陋 单 位 时 间 独 立地 扔 笨 
次 , 没 在 第 ”单位 时 间 
11， 先 出 国徽 ,后 出 另 一 而 ， 
并 一 1™ 两 次 结果 - - 致 ， 
， “一 1， 其 他 ; 
(r= 7 人， 
,定义 请 见 第 12 页 及 [2.4) ,其 中 饲 (ao 一 0) 求 Pr<ec 计 
算 Er 及 XX, 的 分 布 . 
3. 计算 covte 6) 其 中 总 为 随机 徘徊 . 
4. 设 Z 二 简单 随机 徘徊 首次 返回 0 的 时 刻 为 #7, 求证 
<) = pH oo + gaP jo0) 一 2(p A ag} 
《其 中 产 PP 分 别 指 从 1,--1 出 发 是 过 程 首 达 0 的 时 刻 ). 
5. 没 辽 上 对 笨 简 单 随机 徘徊 六 求证 RR) OD, (EF =r 
tm 表 趟 出 发 点 ?满足 
| 一 


1 
一 tas 4 17 -1)— 2a ts ry}, 











lu(0.7) -全 
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6. 设 直 线 上 商 质 点 初始 位 置 分 别 在 sy 每 次 按 等 概率 任 选 
- -点 ,该 点 作 一 次 简单 随机 徘 得 , 求 两 点 最后 相遇 的 概率 ( 注 : 痊 虚 
两 点 距离 )- 

7. 设 Z 十 有 两 个 相 引 独立 的 随机 重 徊 ;1: 芭 设 面 一 
二 ,与 区 | 有 阿 分 布 {py :TE2}; 求 证 如 合 -加 的 分 布 是 对 
称 的 ,再 站 如- -5 1 的 分 布 . 

8. 设计 为 ZZ 上 简单 随机 徘徊 ,一 J; 求 让 
| 二 pg; 
Ci-4pq) = |Ip- gl 产 天 和 ， 

9. 求 E' < 了 me +eaf as 1 

10. 设 训 线 上 PRrown 运动 首 达 二 的 时 肇 为 r 哆 设 BB 一 0, 求 
re .进一步 证 明寺 Y y 有 


全 并 人 一 0) 一 


中 nn Sv) Pr 泉 3) 
11. 证明 Brown 运动 8, 有 
CB. 在 (sv) 有 零点 |B 二 x 于 PPi(v, 芝 1- 0). 
12, 证明 天 上 对 称 简单 随机 徘 牺 1 和) .8 一 0, 有 
Dmaxt, > y= 2 Sy) - POE, = 37. 
叙述 Brown 运动 的 对 应 定理 . 
13, 在 破产 问 是 中 , 求 赌博 停止 时 ( 输 光 或 度 得 5 -.r 元 ), 巾 
徒 平 均 净 柱 钱 数 ， 
14, 假设 已 知 
$= ET A Te)) < sn 
求证 它 满足 
($= pi a tl 04), 
I 二 二 0 
永 装 出 二， 
15. 设 
1 时间 分 布 )， 





求证 它 的 惠 败 昌 数 


Sn 
Hz) 和 > jy 


满足 
lta) oo fea (a) dim, (=)， 
| (2) en) 一作 
这 是 (把 百 成 做 数 ) :个 :的 常 系数 - 阶 益 分 方程 的 过 旧 问题 ， 
江 站 分 方 促 的 莫 本 解 为 人 ,各 了 是 通 解 为 
CsA Ce) colgItA 210’. 
泪 有 具体 未 二 C27 .Atz) ,C2)) 并 用 这 伸 条 件 确定 (7 es(2). 
16. 证 赌 徒 千 次 赌博 串 能 有 又 1 元 .和 输 1 示 或 不 加 不 四 种 
结 困 . 概 间 和 茶 为 Portplzdr 一 1 试 杷 破产 问题 及 上 面 1 昔 3 
广 到 这 “情形 ， 
17. 设 一 团 同 赌 徙 破产 问题 , 包 改 蛮 - 一 点 ; 当 赌 圣 内 有 1 拒 
时 .以 酸 闪 名 赢 二 天 ;以 概率 (1 一 6)g 和 输 1 虐 元 ,以 概 府 66 不 输 椒 
蜂 ; 求 修 产 构 六 湾 足 的 方程 与 边 值 条 件 ( 称 为 弹性 边界 的 随机 委 
fl)?. 
18. 平面 上 从 原点 引 - 二 条 和 本 交 用 人为 3 .在 各 杀 射 线 -的 
交点 分 别 记 威 1,2 2 .3.1 2 试 在 
这 政 点 上 定义 对 称 站 内 伯 人 ] ,并 求 开 始 时 质点 在 六 经 过 于 个 单 售 
时 加 后 ,质点 分 别 赤 站 与 过 的 概 琛 ; 
天 一 有 
19. 踢 乙 两 个 扰 选 人 各 得 选票 ” 张 与 站 张 人 全 六》， 没 开 票 过 
息 中 息 始 束 先 于 乙 的 概率 记 为 p,, 试 导出 ps 应 满足 的 差分 方 
人 各, 然 捕 证 明 




















对 i 


Po 
20. 设 志 是 对 称 随 机 徘徊 ,月 名 一 0. 
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_. 《2 L1211 
0) 令 w 全 Ps 一 0) ,证明 = 





(2) 证 明 > 2 ;Rl 
(3) 证 明 加 0 的 时 刻 为 24 的 概率 
Pt) = 0, tn 1 A 0b 0) = 


C4) 用 C2) ,31 证 明 在 24 前 从 未 返回 0 的 概率 
PS FO b E00) = Plé, = 0): 
5》 证明: 到 22 时 刻 为 止 ,&, 最 后 一 次 到 达 0 的 时 刻 r 的 分 
布 为 
Plr = 入) = Wt 人 < 
C63 ”证明 上 很 大 时 





1 1 
Hi OO -一 一 一 ， 
x AR) 


注 :55) 中 的 分 布 was t 称 为 离散 的 上 反正 蓄 分 布 ,这 是 因 为 对 于 Y rE 
(0,17 粗 略 地 








业 一 站 
一 : Ya = lim > Wks 
二 te 
， "1 了 
a lim YY 
了 dd rE 
We al < |] 
可 证 
-= lim i = 二 | dy 
me oT ~»} Te Vyll-y) 
-2 | 
一 元 atcsin 了 了， 


这 里 (* 1] 处 用 了 两 种 近 亿 “woo” 与 ex0 的 交换 件 ， 它 的 合法 性 我 们 暂 日 森 


蔡 它 ( 需 用 测度 论 的 知 让 [). 于 基 我 们 有 当 ? 很 大 时 ,= 六 近似 分 布 为 反正 弦 律 
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站 


站 2 a aresin Ve 


47) 设 了 一 Inf fn 写 1:5 一 0), 试 利用 人 (4) 及 (63) 广 明 E75, 一 
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第 -点 离散 时 间 参 数 Markov 链 ( 蕊 戊 链 ) 


葵 虚 比 入 单 随机 徘徊 和 较为: 矶 的 模型 : -个 粒子 在 1 维 托 点 
集 过 上 上 运动 ,每 小 随 思 地 怎 一 展 . 当 粒子 御 休 家 人 2 计 , 它 癌 
下 或 加 右 二 “ 展 的 科 党 分 别 是 pp, 与 4 一 1 疡 ,起 在 我 们 考虑 的 
这 一 随 宙 运动 与 笛 单 随机 徘 条 的 基本 盖 出 是 :好 青 是 独立 增 起 的 
CE 昌 经 步 位 称 赴 相生 名 并 的 外 硬 前 者 不 然 , 弛 步 位 秘 依 赖 二 它 现 在 
的 位 前 > 此 步 之 前 的 备 步 信物 的 总 和 , 然而 ,在 现在 的 位 入 汪 
给 定 的 菜 件 下 粒子 以 司 的 运动 却 仍 然 与 粒 了 了 在 过 去 的 运动 独立 . 
这 种 统计 特点 号 有 0 Markov 性 ( 这 个 和 名字 由 它 欧 首创 人 Markov 
而 得 各 ,因而 简称 马 岳 性 ) 有 有 Markov 性 的 随机 过程 称 为 
Markoy 过 程 ,简称 扎 氏 过 程 , 引 氏 过 程 是 -大 类 广泛 适用 于 各 种 
癸 域 的 随机 过 程 , 特别 是 参数 离散 .状态 空间 有 限 成 可 数 的 情况 
( 株 离 散 参 丈 马 开 狗 ), 由 于 它 的 模 现 简洁 但 久 抓 仕 事 物 的 本 质 , 窑 
的 性 质 也 为 人 们 认识 得 特别 清楚 , 朵 而 是 … 类 特别 重要 的 特 跌 随 
机 注 程 . 本 上 章 主 要 讨论 它 的 基本 概念 ,决定 统计 规律 (分 布 ) 的 特征 
一 -转移 概率 年 阵 以 友 统 计 性 质 . 








8 3.1 Markov 链 的 概念 与 转移 阵 


1. 概念 


定义 3 1( 马 氏 链 ， -个 随机 过 程 516,658,.…) 称 为 
-个 网 散人 参数 的 Markov 和 链 ,如 昌 它 的 状态 空间 有 限 或 可 数 , 并 二 
对 任意 的 站 泣 1 mn 及 状态 六 7 都 有 
PES a EE 
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一 王 (人 — flE, — #1. {£3,117) 
记 


六 并 和 {3. 2) 
由 于 状态 室 间 应 和 有限 或 Tn 不妨 设 它 是 12 状态 军 
间 元 率 个 数 是 入 1 或 是 11 20 Ni; 或 FC 引 态 室 问 是 数 } ,我 们 


可 将 全 部 AP 阵 :， 中 (nm 1) 一 《六 TH 让 )3， 二 是 
电 人 ai) 有 有 以 下 性 质 ， 
命题 3. 1 天 ] 》 对 华章 的 状 理 4 A (av — 1 HI 
Pngl 一 1 疆 皇 汶 站 来 企 为 1 的 列 向 本 ,下 维 数 与 状态 空 问 
的 元 素 个 效 至 ， 
2 OSA 为 0 加 天 人 为 1， 
Ul 站. 
3) 灶 任 意 的 Dr petnemjpoy(md) = ptn. 
: 
， 此 EH 
Pad Plt) — Pwd), 
证 明 天 2) 报 然 . 区 
Sp tn smn) 一 已 (名 一 en 一 站 
PI)é, = se 
二 大， 
Pr mm pamt) = > Ptes RI = PE = jE,- 


= OP AIS = DPE je kk 2) 
A 


| 和 ， ， 
一 了 PE 一 1 二 
一 人 
小 


= P(E = EE 一 了. 
定义 3.2 满足 策 件 已 PP 2)P 3 的 年 阵 旗 ，Pto sn; 你 
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为 - -旋转 移 概 率 阵 . 满 是 P. 1) 与 P. 2 的 “个 矩阵 陈 为 -个 随机 
矩阵， 

命题 3.2 以 下 和 命题 彼此 等 价 : 

1) 是 一 个 起 氏 链 ; 

2) (3. 习 式 灶 吉 二 1n 突 从 及 状态 ijor 呈 a 1 成 谍 : 

3) 对 任 窟 的 0 这 no 下 人 有 状态 


本 


PE 
一 Pté, C— Pi, Cn rn) py, Canad er pn jr); 
(3. 3) 
4) 在 3 引 ) 中 对 于 二 0 一 J wp 一 5 及 状 意 站 
i 1 《3.3) 式 均 成 立 ; 
5) 对 于 任意 的 这 1 愉 状 态 
站 均 有 
PE hie 
= Pm = rt = |B = 《3, 4) 
6) 在 处 中 将 3.4) 改 为 
有 人 
一 PE 一 
X PE, ,i i. 
此 即 对 任意 的 状态 :已 知 =i 的 条 件 下 ,过 去 与 将 来 独立, 二 一 ;i 
就 是 说 ,将 "现在 ”看 作 时 赂 ;5 时 ,“ 现 在 "站 所 相 的 状态 已 知 . 
证 明 显然 有 5) 后 6)，5)-1):>2),3) 一 和, 因 听 只 短 证 明 
2 一 4) 全 3 及 3)=>5). 从 2 由 概率 的 乘法 公式 我 们 可 得 到 4): 
PE = tm 1 = i 
= PE = PE = i 
X PS min OO) 
— P(t 一 Lp 十 Dp nt lo tt 2 
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x 天。 tT 


革 册 在 上 式 中 令 避 = 二 ;并 对 全 部 可 能 的 说 ( 关 辣 na 


好 求 和 :左边 就 是 


和 抽 由 


1 一 i ， 一 i， 1 11), 
呈 . 1) 与 ,2) 得 到 右边 相应 的 和 是 
PS, OOP, ny rp, nm, ,sm 


二 是 就 得 到 4)=>3), 而 由 茶 件 概 率 的 定义 与 3) 我 们 有 








1 
2 2 2 . 
De = oe jyer dS eT a 
PE vt 1 


1 
He Ps RO 
~ pe) — 





Puinn 十 mr ps, Jj 





po ,a nn 一 nin) 





[二 ps (Hn i “pis Cn mm sn | 
一 FT 加 
一 厅 ( 一 i Ei + -mi ER -— 7. 


此 即 3) >5). 命 原 证 毕 


上 面 的 命题 说 明 ; Markov 性 就 是 “在 已 知 现在 的 条 件 -下 ， 


过 去 与 将 来 独立 ” 
2. 时 齐 马 氏 链 


果 : 


其 它 


定义 3. 3( 时 齐 性 ) 离散 时 间 参 数 节 氏 链 丘 和 你 为 时 齐 的 ,如 





P(E ,nm = em 二 1} 一 Pee, = IE, 7) A pln), 
与 吉 元 关 . 这 时 和 矩阵 Pt 全 (p(n)) 称 为 6 的 x 步 转 称 阵 , 特 


别 将 PC1D) 记 为 Pps 会 py(1), 称 PP 为 5 的 转移 阵 . 


第 1 


一 个 时 弃 马 氏 链 的 转移 阵 严 之 所 以 特别 重要 ,是 因为 此 时 在 
了 中 的 
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下 二 P™ | 
中 见 P 卫 决定 全 部 的 也 (6 二 中 面 二 站 :从而 南 命 题 3.2 的 37 与 
全, 户 和 包 分 布 ye-iey0umPI5 站) 入 决定 了 二 的 一 切 有 限 个 
上 时刻 的 联 台 分布, 也 就 址 定子 二 的 分 布 : 
(全 = 1) 一 入 用 PCa)y， 
pn) PD 
PE = fies 
CD 


特别 , 令 zu000 一 一 站 就 有 


wnt IPE) 
a 


Yan) ps 《Master 方程 或 主 方程 )， 


区 


3- 几 个 简单 的 应 用 例题 

例 3.1 广告 效 荡 的 推算 . 

基 甲 逢 香 滤 改 变 了 了 广告 方式 ,经 调查 发 现 : 炎 甲 香波 及 另外 一 
种 主要 芝 委 对 于 的 丰 客 每 两 个 月 的 半 的 转换 率 如 下 雪 ， 




















假设 日 前 的 三 客 分 布 牵 为 (0. 25,0.30,0.35.0.10), 求 半年 后 由 香 
18 





波 的 顾客 率 . 

解 令 己 为 上 性 所 列 的 转移 陈 :半生 后, 厦 客 在 四 种 香波 上 
的 分 布 潜 丰 

os te ep tp dP C3.1) 

此 中 cpp p) 一 (00.25,0.30.0.35.0.10), 将 前 耐 表 中 的 具 

体 数 宇和 代入 .得 乔 ; 

35 U0372 U.N 


D0. ORS ,47 





| 

| 

[36 134 0.5 0. O06 
[ia37 0.231 O136 0.26 


S891 
1 B0174 ， 
i Y ， 
| 3 ， 
Ln, SONY ] 
| 中 89 ， 
, ， 0. 6017351 
35 0.1) | 二 0. 824. 
| 站. 834 | 
0 HSNO9 
可 见 . 甲 种 看 波 的 顾客 半 人 第 后 将 由 原 米 的 25 他 找到 有 2 学 .新 
的 广告 方式 很 抑 效 蔓 . 
例 3.2 简单 随机 徘 箱 作为 wiarkov 链 ， 
在 第 -人 童 中 才 虚 的 简单 随机 徘 筒 # 一 ,二 01( 其 中 














So) 一 之 ,Xe Xt) 


1 
而 {Xi 在 注 07 为 4d. 序 询 }) 是 一 个 马 氏 链 . 这 是 多 为 
Ps,, 1 2 一 i 一 1 7.) 
一 - 站 1 二 - 各 | 二 二 了 二 bh jr -一 7 


— PX, 
和 





[6， 其 他 
= P(E = i$ =i). 


这 时 ,£5 一 6,1m 这 0) 是 时 齐 的 蕊 氏 链 , 它 的 转移 概率 阵 是 


gq 0 pp 0 0 el 


| 0 go pp 0 
P= (hp) = | ， 


| 
| 
1 


0 0 
例 3.3 带 吸收 幢 的 随机 徘 初 . 
设 在 a 两 处 分 别 半 -~ 吸收 收 ( 见 $3 2.2.4 段 ). 令 了,(w)， 





To) 与 Tt) 分 别 为 随机 徘 彻 首 达 a,8 及 a 或 之 一 的 时 间 , 因 


而 二 CD Too) 区 令 
WP) A ny)}, 7 人 0}， 
SA 
划 了 地 分 别 是 在 e 与 避 两 处 都 有 吸收 辟 和 仅 a -: 处 有 吸收 壁 的 随 
机 徘徊 ,它们 都 是 蕊 氏 链 . 
王 面 我 们 来 证 明 ? 是 马 氏 链 ,而 把 关于 ?是 蕊 氏 链 的 证 明 留 


人 


Fn 


给 读者 . 由 于 
Pet 太一 
国 PO = We 二 .11 二 fy = 2) 
PO iol 
人 
(nr 一 1 tAr = i = 1) 
又 注意 到 之 n 当 上 且 仅 当 名 ,各 ,… .各 都 不 是 4 或 刀 而 当 玫 
1 时 ,上 式 等 于 
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DE i 
POs, —- 1 一 1, 1 一 了) 
Pet, = i)p,, pomp, p, 
加 Pn 各 下 — po,. {3.5-1) 
Pe, = io) pir Pas, "Pip 
当 这 
外 蕊 要 攻 起 Ts ot | mr 一 多 1=277 或 让 的 博 
并 2 ， 
Pn 二 a 4 
ty 一 7 一 去 











一 有 
一 了 

一 是 一 - 

= Pié, OP po, 

一 天 ( 六 fl 二 1 站 个， 

Pt 


= PE 1)6,,. 

于 是 当 Hornet sig Ea 1 二 ?二 4 或 5 时 ， 有 

PP 一 j|% 二 oN 

= = PO = jn = 7). (3. 5-2) 
综合 (3.5 1) 与 (3. 5-.2) 
DP = | = 1 二 右 1 i) 
_ 人 习 包 EE [Orn] 使, 1 
tt 其 他 情形 ， 








(3..6) 
芭 “方面 , 当 i3a 或 5 时 ,我 们 有 
PO Tip = PO = i,r > ns. = 
是 , 当 Tn 时 ,ra 二 1 内 而 六 ,一 en 
上 式 一 P(& 一 Ta. Oe 1) 
= Pé oj ir Pé, = or) 
一 (名 ye 1 天 (7 = 1). 
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出 所 的 号 氏 性 ,上 式 等 于 


六 


可 见 这 时 有 
Pen,, I=) = pp, 
当 i 一 a 或 必 Ht， 


Pm Pp, = 7 jn) 


— (= fT ES A yn CO 1) 
PE srr) 
一 Pm, = 0,,. 
于 是 当 7 一 a 或 5p 时 ， 
PO TF 
综合 (3. 6) 双 (3. 8) 就 得 到 了 的 马 氏 性 ,而 日 


= 了 | = i 二 fo 1 一 如》 = 人 
于 是 ,? 的 转移 概 这 阵 就 是 

[1 0 0 | 

PC— (Ps) 一 | 产 ， | 


io 0 … 1i 
例 3.4 带 反 射 此 的 随机 徘徊 . 





在 上 例 中 , 若 考 虑 在 5 到 a 或 6 时 反弹 回 - 格 , 即 
i (0), S10) 天 人 


如 会 4a 十 1， < 1 a; 
ol & pp. 


不 难 证 明 5 全 5 之 01 也 晨 一 个 马 氏 链 , 它 的 转移 陈 中 


i0 1 0 ... 0 0 1 
1 


{3. 


当 7 二 4 或 办 


(3.8) 





§ 3.2 常 返 与 非常 返 


甘于 瑟 狼 链 的 - -个 肯 然 的 问题 是 ;: 当 ， 虐 变 哉 大 .Co 的 分 


布 变化 是 否 会 有 什么 倾向 呢 ? 首先 我 们 以 简单 随机 徘 咎 这 种 简单 
情形 为 例 米 巩 查 这 一 侣 匮 . 





1. 简单 随机 徘徊 的 常 返 与 非常 返 
由 强大 数 律 .我 们 可以 得 到 ; 当 wn 一 -= 对， 


<， 十 > 
Ls pd (a,e,y, 
nn Ea 
可 pg 
Po Pimé, (tw) — 4- 7) = 1. 
加 理 半 pp-ig 时 
Po limé, (ew) =— "~ ) -= 1. 
从 而 站 户 关 了 时 ,对 插 章 的 |v1< 十 .> ， 
Oe Pw oo 一 ) 


tw: 在 作 一 十 避 ( 当 证 -全 车 


:过 一 Po Nim$, {ew) 二 二 于 或 373) = 0, 
于 中 ww 表 水 革 碟 这 笑 作 对 无 究 名 个 既 发 全, ?， 吉 A 
Per | -vw). BFL 
和 
现任 末 坏 疡 -- zf 的 情形 , 几 2.1.4 段 结果 : 
下 章 的 二 尼 )， 
于 是 可 生意 的 w 行 限时 间 必 见于 y 达 男 -状态 ;此 了 六 攻 南 达 
… 刀 此 无 限 地 起 既 ,可见 | 


{3,0) 


站 oo £3, 101 


mL 





2. 马 氏 链 的 常 返 与 非常 返 

上 的 43 和 107 分 别 表 示 状 态 的 恩 恋 性 与 常 牛尾 .下 
面 | 我 位 给 出 一 租 定 

定 半 4 对 过 0 人 (oo3n2320i5 装 态 > 称 为 常 返 的 ， 
外 果 (3. 1 中) 碟 成 立 . 苦 任 意 的 状态 部 常 返 . 朵 所 称 为 常 抬 的 : 状 
态 y 称 为 暂 态 的 . 姬 时 (3. On 如 所 的 任意 状 态 均 为 暂 态 
朵 称 志 为 暂 态 的 . 暂 态 也 可 称 非 党 

] 


上 简单 随机 徘徊 图 常 返 的 , 当 且 仅 当 户 一 9 一- . 


事实 了 上 马 氏 链 的 -个 状态 如 不 常 返 ,就 -年 是 暂 态 的 .这 征 因 
为 我 们 有 个 面 的 5 1 律 . 
命题 3.3 设 上 是 一 个 至 氏 链 , 苦 记 
a Please) ~ y, ). 
则 a 只 能 等 于 0 或 1, 即 a 一 7. 有 即 4 不 是 常 返 的 就 必须 是 暂 恋 的 . 
证 明 令 六 (oo) 为 第 zx 次 到 达 5 的 时 刻 .于 晨 由 急 氏 性 


a =P(w: Elw) = y, 10.) 





PP, Cy, fw en) 一 RB) 一 oo) 一 .Pa 1. 0. ) 
一 人 Po tw) = Pw (mw) = vy, 10.) 


iD, 必须 至 至 少 到 世 尝 是 fm) 一 处) 。 


过 下 (oo 二 必须 至 少 到 w 站 演 ) am 一 ee 

wt 必须 划 yy 无 窗 黎 演 ) re 一. 
是 esesse, 即 a=e, 从 而 af1 -oa 一 0. 即 e 一 0 或 1 ,从 而 
可 凯 督 43. 9 不 成 立 , 则 (3, 10? 必 成 立 . 也 就 是 说 不 常 返 就 必须 是 
和 企 僚 的 ,从 面 我 们 也 糙 特 态 称 为 非常 返 


Le 
-ti 





命题 34 若 P(w; 了 (过 二 一 工 . 则 当 v 裳 返 时 
Pwr ef 一 von ) 一 |. 
而 当 非常 返 时 , 则 
Dw Bw yy Lo} 10. 
证 明 当 »w 韭 常 迟 时 ,利用 续 民 性 
Pos lm 一 Yin) 
站) 


四 
人 


= Pe: Tw 一 Co él) = y, 1.o.) 


= Pw Tw) IP Hm) — y, Lo.) 
0 《由 人 靖 题 3. 3). 
同 理 当 常 返 w 时 
Pw Etw) = y, jo.) 
~— Pw: To) oP,(w: Ew) = yy, 1.0.) 


3. 马 氏 链 的 状态 分 类 


在 $3.1 例 3.3 中 的 边界 状态 a 与 5 和 其 他 状态 (fiya < 一 
2 是 很 不 同 的 . 由 于 
了 tw; 在 有 限时 间 fw) 必 达 或 四 一 ] ， 
Pool = 2 对 史 蒂 1) 一 
Plwit tw) = 5 对 Yn1) 二 1， 
我 们 可 以 看 出 边界 ,5 痢 是 常 返 状态 ,但 是 对 x 隆 a,6. 我 们 有 
Pas Sm) rr, 1.0.) 
二 1 一 了 ,tw: 5&(w) 在 有 限时 间 达 a 或 5, 并 水 停留 在 奢 里 ) 
=]—1= 0. 
可 见 这 里 的 非 边 办 状态 二 是 非常 返 的 . 
六 例如 在 例 3. 4 中 如 考虑 简单 情形 一 1. -3 

















bt 


则 容易 由 归纳 法 验证 


fo 1 0 4 0 ?| 
Pa 一 ie 0 访 | ， P= (plo = | 1 D0D ': 
iD 1 0 号 0 p} 





在 这 种 情况 下 ;无论 是 否 是 边界 状态 , 玫 是 常 返 的 . 下面 我 们 来 说 
明 这 一 点 . 
对 并-- 2 由 下 sf2nay==1fa 闻 1),， 可 见 
Pew mi) 2. Yi} 二 1， 
册 Palwré td = 2 i, 0. )=1. 
对 二 1,3( 边 界 点 } ,我 们 有 
Pilwst (tw) = 2k) 

= PitosrY 1m Oo 3 = 2 = 1} 

= prlrprrl**p*rl:o 

pg = pg 


癌 理 
Ptwdstw) 一 28k) = a + F- 
下 是 
Plews tr) i == So li, z == pi 1 =- 1]. 
A 


FasT +t Mp l. 


也 就 是 滋 从 边 田 状态 “1” 与 “3" 出 发 总 是 要 在 有 限时 间 看 来 的 ,内 
而 以 慑 率 为 1] 地 不 断 重 复 这 个 人 向来 ,离开 ;再 回来 . 玉 离 于 的 过 程 ， 
“必定 无 穷 次 癌 到 它 出 发 的 状态 ， 

从 二 面 的 例 闻 可 以 看 出 :状态 是 村 常 返 放 不 一 定 要 求 过 得 以 


Dd 





























慨 率 为 1 地 留 在 原 地 ,而 与 所 有 可 以 到 达 的 状态 的 性 质 有 关 . 为 
在 本 节 中 我 们 将 对 状态 按 它 们 大 否 相 道 米 分 类 ,并 进而 区 查 这 
分 类 的 常 返 性 . 
定义 3. 5( 可 达 与 互通 ) 状态 i 称 为 可 达 状 态 j{ 记 为 :一 站， 
如 果 存 在 1 一 盖子 使 得 
PP， 【对 任意 的 天 二 01 成 讶 )， 
状态 了 与 了 称 为 互通 , 记 为 一刻 如果 = 且 ji 紫外 ,我 们 规定 
这 样 ,开通 关系 是 :个 等 价 关 系 , 即 满足 ， 
1) 7 屯 冶 /一 
2) i 一 jj 不 纺 含 中; 
3Y ii. 
{是 ,可 按 关系 一 将 状态 空间 纪 分 类 ,= 六 ,每 类 的 全 
部 状态 互通 ,昨日 在 此 类 之 外 ,再 无 其 他 状态 能 与 类 中 的 状态 互 
通 .例如 在 例 3. 3 中 
To at lo = a isa Sib), 
其 中 {a; ,8} 尖 类 中 分 别 只 舍 - -个 点 (边界 点 ). 在 例 3. 4 中 全 部 状 
态 都 互 道 ,因而 人 有 -一 个 互通 类 . 
在 下 文中 我 们 将 看 到 ,这 种 互通 类 的 分 法 ,对 于 常 返 态 盏 关 重 
要 ,而 对 于 蜀 态 则 并 无 重要 作用 , 汪 此 许多 书 中 对 于 暂 访 根本 不 于 
分 类 ,而 让 它们 折 成 一 类 一 一 暂 态 类 . 
状态 空间 4 的 子 集 4 称 为 户 闭 集 , 如 果 
> P, 一 1 (YE A); 
如 果 .无 真 记 -用 于 集 . 则 称 马 氏 链 的 转移 阵 卫 为 不 可 约 的 ,这 时 
我 们 也 简称 马 民 链 为 不 可 约 的 . 
命题 35 此 :一 J ,i 常 返 , 则 
Pos) < 十 必 ) = 1, 


此 
祥 





[| 
二 下 





证 明 “i 常 返 " 蕴 合 "(wT (ww) 过 二 020) 二 1*, 其 中 
Tm) A nfin S160m) = 7}, 
六 JT) 3 天 i 
lo. 当 Gtwy 一 站 


若 仿 mr tnt PC D0 ,NW 
Pot) = 0 Cn < 9) , Plms) > 0. 


因而 
Dwé, (ew) 一 ji Cn) 一 zy, 1 I Eo ) 
Ee > Primyp ln — my) — 0. 
1 em, 
于 晨 


1 二 P(e tw) 十) 
一 Pw Cw) 一 j,T, Cw) < 十 oo) 
二 Ptwd, CW) 天 大 Ca < 十 ce) 


区 0) 一 jm < TCw) < 二 05) 十 >) pr Gm) 


LE] 
一 D.C: Cm) 一 了 280 之 后 < 必 达 z) 二 《] 一 ptm )) 
= pm)OP wT (mw) < co) 1 ponmn ) 
pm — PT (w) 一 十 co 
1 
可 见 1 一 Pesto)< 二 co) 一 0, 即 由 7 出 发 有 限时 间 必 和 达 . 
命题 3.6 状态 ; 常 返 等 价 于 以 下 两 条 件 之 ， 
(1) PlwT, (0)< 400) 1 
(2) 2 pt) = oo 


证 明 常 返 " 等 价 于 “从 / 出 发 以 概率 为 1 地 有 限时 间 内 必 
56 





返 同 i", 这 是 因为 时 齐 马 氏 链 概率 为 1 地 返回 1 次 ,就 有 2 次 .3 
次 :无穷 区 滨 . 从 而 和 带 返 ? 等 价 于 5 )， 
另 -方面 , 令 
fA 一) 一 PP,Cwy 在 有 首 达 启 ， 
《3. 11》 





于 二 
PlwT ot oo DFA .11y 
此 外 ,对 ji 
pn — Plwé (lw) = 7)) 


一 DPT mdm) = 访 


叶 二 | 


一 DP, Cw:T, (Cw) = Pee 一 中 一 力 
m=] 


= Df Cm pn 一 m)., (3. 12) 
员 1 
对 固定 的 i, 看 备 级 数 
Fz} = Df mre" (tz| 1), (3, 13) 
m- 上 
tz) = Pulte tlz| 1), (3.14) 


于 是 


Pl 一 人 > fn)petn— me 1 


= ]m=1 


— DD pn — mz" "yf tmye™" 十] 


m= r=m 


= OT me Sp kat + 1 
1- 1] 下 = 从 


| 


=F(z)P(lz) 十 1 











从 而 
) 1 rzlc 
已 (z) = 1 一 3 Cs! 1) 
念 zz 人 1 古风 p02) 收 各 当下 仅 当 fn) 一 1， 此 到 (与 
全 二 人 1 可 uP i 


(2) 等 价 . 命题 证 毕 ， 

推论 ”状态 i 非常 返 当 且 仅 当 Pit) 所 十 cr- 

市 王 命 题 3. 3 ,推论 县 然 ， 

命题 3.7 若 ; 常 返 ， = 六 则 ) 一 六 而 用 也 岂 常 返 ， 

证 明 命题 3. 5 说明 yi 于 是 3 xys 使 

四 (07 > Op lm) > 0, 

从 而 Put 十 na ma? SF pnt) pel) Pp, Cmo). 
于 是 由 之 户 .Ca 发 散 可 见 >) ptn) 也 发 散 . 再 由 命题 3.6 知 j 
也 是 常 返 状态 ， 

从 命题 3. 7 可 见 -- 个 前 面 所 讲 的 互通 类 中 有 - -个 状态 常 返 ， 
则 其 中 任 - -个 状态 都 常 返 . 这 意味 着 常 返 是 整个 互通 类 的 性 质 . 青 
则 ,不 可 约 链 成 者 是 只 有 一 个 筷 通 类 的 常 返 链 ,或 者 全 是 暂 态 . 


$3.3 马 氏 链 的 转移 概率 的 极限 与 不 变 分 布 


本 节 中 我 们 给 出 关于 蕊 氏 链 的 最 重 吉 的 结果 之 一 -一 关于 
步 转 移 概 率 逢 阵 P , 当 一 十 oo 时 前 极限 的 研究 ,以 及 极限 与 不 
变 分 布 的 美 系 ， 


1. # 步 转移 概率 矩阵 产 的 极限 研究 


首先 我 们 对 一 个 特殊 情况 一 -全 部 状态 可 在 -一步 所 通 的 有 限 
状态 马 氏 链 , 给 出 产 的 极限 . 
定理 3.8 设 # 是 一 个 马 氏 链 , 它 的 状态 空间 57 只 有 有 限 个 
元 素 ( 不 妨 设 后, 而 且 对 2 中 任意 . -个 状态 : 与 
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都 有 Pr ee ;如 在 在 上 的 - :个 分 布 一 {mA Tv 使 得 
对 一 切中 的 状态 上 与 了 都 有 : 


了 ~ 
12 ~ aps 一 RN 0 





2) |ptn- x | NO ,其 中 Amin{puy:iirj EH 二 
1 
MN 

广 ; 满 是 3) 的 请 称 为 具有 带 数 台历 作 

证 明 令 MM 与 mm” 分别 是 矩阵 户 的 第 j 列 的 最 大 与 最 小 
值 ,显然 


Amn{piui jE Ep DPRl - (N18, 
aba 
因而 
< 1 S、 — 1 cL) Cl _ 
0 二 N 页 ， mi 之 中 AT 1 CN 1 人 
从 而 


亲人 0315) 


3 maxp,ln 十 1) = max > pspr Cn) 
’ 
< max 人 > purl” 一 Mo、 
类 仆 地 ,一 一 minp., {《 十 1) 次 min pr = 二 mr 也 就 起 


说 MM,” 基 单调 下 降 的 ,而 wm" 是 单 调 上 升 的 ,如 果 我 们 还 能 进而 
说 了 明 





SM mR Ne 0 (ro0), (3.16) 
注 能 推 山 各 列 避 s 时 趋 于 相同 极限 . 进而 若 令 r, 和 
mM ,出 出 

mr Mp RM rr") 
就 知道 limp,, (a) 一 A, ;从 而 有 
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一 = limp,, (2 十] 一 lim >) Pr” tpi 一 3 er 





订 见 . 恤 赴 明定 地 具 本 证 明 (3. 16) 即 可 . 为 此 注意 


Me pe maxputr + 1) minpn tl) 
na 0 一 min pspos tn) 
ax pe tn EP 
na ed : 二 站 
2 > 7p. i Sprpuln) 


:一 > (Pl 一 Pit) pastar) 一 之 Cp, pued parla) 


pe 


.MON pa — py -mr Ch — pn), (3.17) 


站 


六 由 于 
DO = CP 一 P's) 十 >, | Cp 一 Pst) 
: E 
一 人 Cpt -Py 一 之 《六 一 pa): 
于 是 


> (Cpr 一 产 一 > Cp -- pr) 


是 到 


-一 《一 了 Pus? 一 全 Pst 


El -DY -1 Nd, (3.18) 
从 而 人 3. 17? 式 就 变 为 
Mo 四 pati (Ca mm >, (ps 四 Ps) ， 
这 样 由 归纳 法 ,从 (3. 18) 与 (3. 15) 就 可 得 到 (3, 16), 定理 证 毕 ， 
定理 3.8 及 其 证 明说 明了 随 着 ”的 增长 ， 严 的 每 一 列 ( 例 如 
第 半 列 ) 各 元 素 越 来 越 接 近 , 最 终 以 行 而 量 x 的 第 j 个 分 基 mw 为 共 
同和 极限 .于 昨 所 的 各 行当 过 十 吕 时 , 均 以 x 为 极限 . 这 意味 著 无 
论 具 什么 切 分 布 出 发 ,当时 间 充 分 长 后 名 的 分 布 淅 近 于 x 
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limP,(w:S, (8%) = ~ imp,(n) = 
而 所 
im {ew) - 1) — lim 人》 P(t em) = Pmt (tw) 一 门 


一 - 人 Po 一 了) limps(n) 


加 
一- DP lbw) == {xr, A 


2. 不 变 分 布 与 ”的 极限 (如 存在 } 的 求法 
在 第 上段 中 , P 每 一 行 的 极限 是 个: 上 的 分 布 ,这 是 办 
47: 





TO— limp, tn) 0 


Sn. 一 -~ limp,,tn) 一 lim SY ptn) 一 1. 


pa 1 一] 了 1 
史册 于 它 满足 
Dmpy 一 mVY ELc (3. 19) 
二 
容易 从 归纳 法 及 


人 > Tp tn 十 1 一 Dm popotn) 
中 


一 mb) pas) 入 
得 到 
jmp ny) = x (3, 20) 
于 是 我 们 得 到 了 以 下 命题 ， 
命题 3.9 若 开 满足 (3. 19), 刚 必 对 一 切 m 之 1 , 满 是 (3. 20) 
从 而 , 若 5 的 初 分 布 为 + ( 即 已 (osetay 一 门 一 亏 ?就 有 
ro oD) = Sap,(n) 一 TT,, 
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好 了 岂 从 初 分 布 z 出 发 , 任意 时 刻 的 分 布 都 仍 为 ， 

我 们 给 出 以 下 定义 ; 

定义 3.6( 不 变 分 布 ) 对 以 了 为 转移 矩阵 , % 为 状态 空间 的 
时 齐 与 氏 链 上 ,概率 分 布 z= 人 1 E 5) 陈 其 为 不 变 概率 分 布 ， 
如 果 

xzP—x | 妈 疙 ups 二 zt 对 jE 成立] (3.21) 

命题 3. 10 若 定义 3.6 中 的 时 齐 马 氏 链 5 以 其 不 变 分 布 为 初 
分 布 , 则 邓 任 意 的 和 之 1 之 1， 及 时 秘 丰 天， 人 Ce 
《oO) 与 {6.0 ,5&1.(w)) 永远 问 分 布 ,从 而 5 与 也 同 分 


布 ,其 中 5A (won = 0,1,…) ,也 就 是 5 的 分 布 对 时 间 平 移 不 
变 . 
证 明 
Pw 一 一 (由 命题 3.2) 
一 下 (@: (0) = i pis Cm — He py i — Hi 1) 
二 pi A Ra) py, a M1) 
= Plw:é, Ka] = 一 《由 命题 3.2). 

命题 3 11 苍 limp,(m) 一 吉 对 Vivj€ 7 成立, 日 t= 


1. 则 是 P (或 说 5) 的 唯 -… 不 变 概 率 分 布 . 即 x 是 方程 


Th 
C3. 22) 
| = 1 
的 非 负 解 . 又 若 SCP) 不 可 约 , 则 (3. 22) 的 非 负 解 存在 唯一 也 是 
钴 阵 了 的 特征 值 为 1 的 在 特 征 向 量 , 而 是 PP 的 特征 值 为 1 的 特征 

空间 是 一 维 的 . 
证 明 这 里 我 们 仅 对 定理 3. 8 条 件 成 立 的 情形 证 明 . 这 样 我 
们 有 有 
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xz, 一 ljim pn 4- 1) = lim DV pan) pr, 一 和 bar 
四 NT 下 


讼 一 {rj tw) 是 并 了 > 一 Ea 一 1 的 解 , 则 出 定理 有 .只 


一 Nepa Cn) J A 页， Ti 一 好- 
命题 证 毕 ， 
命题 3. 11 告诉 我 们 只 要 解 方程 (3. 22) 就 能 求 出 Limptn) 


(如 果 极 限 存 在 ). 











1} 1 1 
[5 2 
| . 
例 35 没 Pr 一 | 十 怪 z| . 则 x 是 下 而 方程 的 唯 _- 解 ; 
1 1 1| 
2 3 6， 
| - 二 -0 
1 一 2 十 半 忆 六 一 0D， 
1 Sa 
区 十 了: 十 了 4 二 1 
容易 得 到 上 面 方 程 的 唯一 解 是 
. -ll 1| 
CTTa tt) 1 3 3 3) 
从 而 由 定理 3.8 知道 以 为 转 称 阵 的 时 齐 绸 开 链 5 应 满足 ; 
limpP (SD) 一 万 一 二 ij = 1,2,3). 


也 就 是 说 时 间 充 分 长 以 后 . $.(w) 近 王 均匀 分 布 . 
例 3.6 设 有 65 个 车 站 ,它们 之 间 有 公路 连接 ,情况 如 图 . 如 
果 汽 车 每 天 可 以 从 一 个 站 驴 到 与 之 直接 有 公路 相连 结 的 析 邻 车 
站 ,在 夜 问 色 达 车 站 留宿 并 接 党 加 油 .清洗 .检修 等 服务 ,次 日 清晨 
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各 关 按 相同 的 比例 将 各 汽车 诬 往 甚 相 邻 年 站 . 试 说 明 在 运行 了 很 
多 日 手 以 捷 , 各 站 每 晚 留 宿 的 汽车 比例 趋 于 稳定 ,并 求 出 这 个 比 
例 , 以 便 正 确 地 设置 各 站 的 服务 规模 . 

解 ” 设 一 个 汽车 在 第 ”大 留宿 的 站 号 为 所 (ao) ,于 是 在 已 知 
Stw) 一 的 罗 件 下 ,第 2 十 1 天 它 留 簿 的 站 号 是 以 亲 的 概率 取 与 
上 & 站 由 令 的 种 站 之 - -( m4 为 与 站 相 邻 的 车 站 数 ) ,而 与 第 4 一 1] 天 
及 其 以 前 的 各 天 汽车 留宿 何 站 无 闫 . 从 而 一 个 汽车 的 留宿 {送行 ) 
捕 剖 (wn 一 0,1,…} 就 是 一 个 时 齐 己 氏 链 ,其 转移 矩阵 是 ， 








1 1 
0 0 0 0 3 
1 4 1 
3 0°09 3 °° 0 可 | 
0 冯 0 羡 0 0 
“一 1 1 了 1 
0 二 二 工 
3 0 3 3 
1 1 
0 0 0 0 
1 I 1 1 
4 4 0 4 0 
1 
2 [9 
图 3.1 
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解 方程 


(TOT 
|y 
Pin = 1, 


a 3 1311 
可 得 到 二 [1 

值得 指出 的 是 照常 规 吉 接 求解 方程 x P x 是 比较 麻烦 的 ， 
下 而 我 们 给 出 的 定理 3. 21 及 可 覆 马 氏 链 理论 ,可 以 六 大 简化 这 种 


计算 (请 参见 下 面 $3.5 例 3.9). 
3， 严 的 平均 极 跟 

在 本 生前 两 段 中 ,指出 了 - : 步 二 通 的 时 齐 志 氏 链 的 转移 所 阵 
Pr 有 -个 各 行 均 机 同 的 极限 .但 是 一 般 地 讲 Pr 计 不 -… 定 有 极限 . 
例如 当 











1 1 
i? 9 2 = 
1 1 
? 0 3 3 
“一 1 1 1 
2 2 © 0 
1 1 
| 0 站 
则 
1 1 | 
2 2 9 1 
> 总 心 0 
P: -= 1 1 | 六 ?41 -PP. 
们 器 一 一 
2 2 
| 1 1 
.0 0 3 5 





f5 





可 见 四 本 2 一 冯 ，Pn (2 十 1> 一 0 limpu tn) 不 存在 ， 这 时 定理 
3.9 -- 般 不 再 成 立 , 但 我 们 有 下 面 的 定理 : 
定理 3.12 设 卫 是 一 个 NN x N 转 称 算 阵 , 则 
lim 译 之 Pk) 全 J) 
一 定 存在 . 儿 令 工 =《1),; 则 以 下 算 阵 运算 等 式 成 立 : 
LP"—- PL—>—Lo=L: (Ym ])}. 
证 明 ”为 避免 技术 性 的 国难 ,我 们 这 里 只 对 有 限 状态 CN 个 
状态 ) 马 氏 链 来 让 明 . 但 本 定 埋 对 可 数 状 态 也 成 立 . 令 
TOD AFD PD), OL EL 
对 N? 个 序列 (L003n 一 0,1,…} 一 定 可 以 找 庆 公共 的 {n= 二 1， 


2 了 ?十 o6 ,使 它们 各 自 的 子 询 有: 
Dt) 一 了 《当下 一 十 


这 由 于 
Dn pbony = >) - Splrypr tm) 
了 了 km] 
1 下 < 一 1 人 
= 2 Putr) pam) 一 坝 之 Ant 二 rr) 


| 。 。 
其 中 第 一 项 以 ,为 极限 ,第 二 三 两 磺 都 绝对 值 小 于 从 ,因而 极限 
Ey 
均 为 0, 从 而 
信也 (ma 一 > lim ,Cn ps (rn) 
A f=1t™" 


Ny 
= lim| Do Tn pr Gayl = L,,. 
~ 


些 邯 LP™=l tml). 
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同 理 P"L=L (m1). 





2 和 mm 
宇 甚 | > | L tm 之 1). 


若 记 工会 民 Lm) ,加 我们 得 到 LG 一 开 ; 皂 
Sr ,7) = (3. 23) 
由 广 近 们 洁 [ 语 hmy,, Cn) 存在 举 实 上 ,如 妆 7 妨 有 一 个 收 化 
于 列 Coa) 收 侣 到 某 个 L, .那么 由 (3.23) 可 推出 工 、 [一 上 上 及 
天 ,一 夺回 理 又 有 工 . 工 一 三 ,从 而 工 一 三 . 即 极 限 存 芷 ,而 日 
=~L.L-L. 
定理 证 毕 . 

在 第 一 段 中 ,三 是 每 行 样 的 ,那么 一 般 地 工 应 该 是 什么 样子 
的 呢 ? 若 旗 或 P) 只 有 一 个 瑟 通 常 踪 类 ,也 肥 它 的 任意 两 个 状态 都 
万 通 , 则 工 一 定 是 各 行 都 相同 的 下 阵 . 下 面 的 定 埋 3.13 给 出 了 这 
一 结果 . 

定理 3.13 对 任意 状态 i 与 7, 我 们 都 有 

一 | (27, CE) NL,. {3.24) 


义 设 放 转 移 阵 为 PP) 是 一 .个 互通 常 返 时 齐 I 氏 链 , 则 
lim 3 p(k) = LL = 1r， 


其 中 xz 是 的 不 变 概 率 分 布 , 是 -个 全 部 元 素 均 为 1 的 列 向 量 . 
在 有 限 状 态 情 形 , 筷 遂 常 运 时 齐 号 开 链 的 不 变 松 率 测度 是 唯 -- 的 . 
证 明 ”我 们 仍然 只 对 有 限 状 态 的 情形 证 明定 理 . 
1) 先 证 明 (3. 24) 及 不 可 约 常 返 时 , 工 的 各 行 均 相同 . 事实 
上 ,由 于 (3. 12) 











pk) = -wf (让 下 一 站， 


上 一 1 
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也 Cn) -1% >», (prtk- 人 


一 上 
< 1 < _ 
-=P i A 
利 形 下 面 的 引 理 3. 14, 就 得 到 
7 little) — { PFD L,. 
RR i 二 
当 专 不 可 约 , 常 运 时 ,由 于 


2 C0) = PwT CW) 二 十 ce) = 1. 


从 而 1, = bs 
即 工 每 行 均 相同 ,将 其 记 为 #= Gave) , 即 w= 
2) 现在 来 让 明 x 是 不 变 概率 分 布 . 这 里 我 们 仍然 只 对 有 限 状 
态 马 氏 链 证 明 ,; 以 避免 技术 上 的 麻烦 . 可 数 状态 情形 定理 仍 成 立 . 
,= lim 二 六 Ck) = lim pe - Dp 


二 一 ] 


= -> lim Fp Gk — Dp = S$ lim TS pk) + 6) ps 
fT 4 一 1 


站 


n 
一 -Vy Ti ln — py = = Lp = 了 
了 二 上 二 1 


了 


3) 唯 - -性 证 明 类 似 于 命题 3.11, 留 给 读者 自己 去 证 明 . 
引 理 3. 14 设 4 关 0， 后 入 ec， 尼 之 0， 抽 实 0 而且 ya 





三 用 所 十 o0,]imb,i 一 丰 出 


lim Sag 一 Yao 
证 明 见 附录 . | 
定理 3.45 设 j 是 的 非常 返 状 态 ; 则 
G8 





limp,, tn) = 0. 
证 明 ”由 命题 3.6 的 推论 
pfa TH 0, 
从而 limp, ln) 一 0， 
再 由 引 理 3. 14 
lim p,,tn) = lim >), py 一 大) = 一介 ， 
由 定理 3.15 与 3,13; 我 们 就 可 以 知道 ; 
于 中 对 应 于 非常 返 状 态 了 的 列 的 也 宕 了 ,= 二 0， 
2) 当 了 是 常 返 状态 ,是 非常 返 状 态 
,=| DAL,; 
3) 对 i 是 第 退 状 态 ,; 由 命题 3.7, 可 见 7 只 可 达 与 i 属于 同一 
个 不 可 约 互 遂 类 的 状态 ,有 即 对 任意 有 有 
pn) 二 0 ( 当 j 不 在 i 的 常 返 互 遂 类 中 ). 
综 上 所 述 , 若 5 的 状态 分 为 常 运 互通 类 HH 了 (全 
部 非常 返 状 态 集 ), 出 
7 H， H, …. HH 








ro Sh Dh 
十 £ 
Ji, 0 3 a Bb 站 
工 一 Fn EE 0 
- 上 
Hi) 0 0 中 Lr”™ 





由 此 可 见 研究 P” 的 平均 极限 只 须 限制 在 每 个 正常 返 互 通 类 中 研 


下 面 我 们 给 出 转移 概率 平均 极限 的 概率 意义 . 今 
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NW) 一 《Sm 二 让 ， 
则 
of) 全 人 -一 1&0)) 


就 表示 他 前 ”次 二 处 在 状态 /的 频率 ,于 是 

Ltn) = Ev.tw), 了 一 lim kw, Co). 
可 多 区 ;可 看 作 从 :出 发 . 拟 喜 和 留 于 的 平均 频率 . 对 于 小 可 约 常 返 
二 氏 链 ,这 个 平均 频率 不依 起 于 出 发 状态 了 :因而 也 不 依赖 于 初 分 
布 ， 


4. 关于 周期 与 P 的 极限 的 附注 


在 第 二 段 - -并 始 我 们 给 出 了 总 ' 极限 不 存在 的 反例 , 青 对 比 定 
理 3.8, 我 们 就 发 更 如 果 产 是 周期 性 她 出 现 0 的 常 返 链 就 会 造成 
产 极限 不 存在 . 书 实 上 ,在 -: 个 正常 返 互 通 类 中 , 若 对 充分 兵 的 
nn ， 卫 :za 都 非 零 那 么 就 可 以 证 明 , 全 部 p(n) 当 充分 大 以 
后 世 必 都 非 堆 ;而且 这 时 PP 一 ]7 9- 00) 仍然 成 立 . 显然 ,这 个 
极限 应 与 上 段 的 平均 极限 一 致 . 男 -- 方 面 , 车 不 是 上 述 情况 ,就 必 
定 存在 一 -个 整数 4 汪 1 ,使 得 当 + 充分 大 时 , pn) 0 当 且 仅 当 
"是 4 的 整数 们 ,而 limp, nd) = dr ,我们 这 里 略 去 证 明 的 细节 . 





5, A 全 Sp 的 求法 


注意 到 对 i 冯 j 
BDH Dhart Dp DS pp) 
由 一 下 


4 二 | fy 


=p,, 十 Spufi EE 


i 


Dp op GN. 


i 
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车 此 方程 组 有 了 唯 -- 介 于 0,1 之 间 的 解 , 则 此 解 就 是 上; - 
6，Wright-Fisher 基因 频率 演化 问题 


假设 有 ae 与 两 种 基因 (例如 a 是 某 种 崎 变 基因 , ”为 正常 基 
因 ). 设 上 共 刘 2N 个 个 体 ,每 个 个 体 的 基因 按 2N 个 体 种 中 含 a 的 比 
例 为 概率 在 下 - 刻 成 为 a ,可 则 成 为 2. 问 一 代 代 传 下 去 两 种 基因 


个 数 含有 何 种 变化 趋势 ? 
令 5 为 在 时 刻 n 全 基因 a 的 个 体 数 , 则 # 全 16} 是 - 马 氏 链 、 
二 为 
PS = 


i 2Ar， 
= | [PO PA Pp (k= 0 ,2N), 


其 中 一 i/2N, 从 而 的 转 称 阵 为 <p,.,)、 在 所 有 的 状态 中 ,0 与 
2N 尾 两 个 吸收 态 , 即 
0) 一 DS 二 NY): yw 
而 其 他 i 吏 有 正 概率 到 每 个 状态 . 可 见 : 
i 0, i 2N (0 i < 2N), 
但 0,2N 不 能 达 :0 < 之: 之 2N) ,由 命题 3. 3, 7 非常 返 . 从 而 
limp, ln? 二 000 之 之 2N) .为 求 L% 与 上 .sx : 找 们 注意 PL 二 L， 


即 


< 一 2 一 2 
Imo >, Ee Lon = Das 
并 且 Ls tt Tw = 1. 
由 此 不 难 解 得 
Tn 一 | DR | 5 Ta 一 2 tf = 0,1 a . 


回 到 原来 提出 的 问题 ,其 结论 是 : 当 经 过 足够 多 代 后 ,基因 将 变 为 
或 全 部 是 e ,或 全 部 是 ,车 从 -开始 有 5 个 基因 a , 则 全 变 为 = 的 
概 净 是 12N ,而 全 恋 为 天 的 概率 是 1 一 i/2N.， 

?1 





$3.4 停 时 、. 强 马 氏 性 与 马 氏 链 的 强大 数 律 


类 似 寺 独立 同 分 布 的 随机 序列 的 强大 数 律 , 对 马 氏 链 我 们 也 
有 娄 似 的 强大 数 律 . 为 了 得 到 马 氏 链 的 强大 数 律 ,我 们 先 引 出 停 时 
尽 强 马 氏 性 的 两 个 重要 概念 . 事实 上 ,这 两 个 概念 本 身 在 马 氏 过 程 
的 研究 中 前 有 各 日 对 立 的 重要 意义 ， 
1. 停 时 

在 马 乓 链 去 的 研究 中 ,会 出 现 许 多 随机 的 上 时间, 例如 前 面 讲 到 
的 首 了 次 到 达 了 的 时 间 ， 

了 Ke = inftnsé tw) = 用， 

它 是 一 个 随机 变量 ,而且 这 个 时 间 和 的 发 展 是 “同步 的 ”也 就 是 
说 (wT(w) 过 对 发 后 与 否 , 是 机 全 (0) ,人 (ww),…,$,(w) 来 总 定 
的 ; 

(To 二) 中 华人 少 有 -个 等 于 由， 
艾 例 如 (wo) 首次 到 达 某 - -个 状态 空间 的 子 集合 4 的 时 刻 rw) 
也 是 这 样 的 时 间 ， 

(wr) Sn 一 ft) ,ee Ew) 

中 人物 少 有 一 个 在 4 中 }. 综 上 分 析 . 我 们 给 出 停 时 的 以 下 定义 ， 

定义 3.6( 停 时 ) 一 个 非 负 值 (可 取 十 心 ) 的 随机 变量 rc 
称 为 二 的 -个 停 时 (也 有 的 书 上 将 它 称 为 马 氏 时 间 ), 如 果 ja， 
Tw) 二) 发 生 与 香 完 金 由 信 (0) ,而 (Cw)} 决定 . 

号 氏 链 志 首 达 茶 -- 状 态 的 时 刻 , 首 达 某 -集合 的 时 刻 , 0， 
近 上 两 个 马 氏 链 二 与 了 的 相遇 时 间 ， 

To 会 inf = 

等 都 是 停 时 , 后 者 可 理解 为 SA {SR = 0012) 的 停 时 ， 

{wrtw) 一 下 = ww) 辽 加 0 


下 面 我 们 来 考察 T, Cu) = inf{fn 守 1,6(w) 一 站 住 (ww) 一 7 











?2 











的 条 件 下 的 条 件 期 望 , 事实 上， 


ET C0) = NPC:T(w) 一 《参见 (3.11) 与 (3 1 


上 1 


人 > 人 六 (一 Bp Ck). 《3. 24) 


2. 强 蕊 氏 性 与 强 再 生性 

一 个 时 亨 马 乓 过 各 从 任何 时 间 mm 六 0 茜 起 ,仍然 是 -个 具有 
间 样 转移 佐 阵 的 马 志 链 , 就 是 说 , 若 二 是 - -个 时 齐 马 氏 链 , 刚 全 
[一 01,2. 仍 毗 - -个 马 氏 链 ,而 目 它 们 的 转移 矩阵 相同 ， 
进 - 步 的 问题 是 :车 在 上 上面 的 定义 中 将 4. 摘 成 -个 停 时 ( 它 是 随 


机 的 ), 尾 查 上 仍然 明 马 氏 链 呢 ? 对 二 离 散 时 间 参 数 的 马 氏 链 与 当 
氏 过 程 答案 是 肯定 的 (但 对 于 后 面 的 连续 时 间 参 数 的 马 氏 链 此 结 
论 并 不 永远 成 立 ), 下 面 我 们 村 离散 参数 马 氏 链 给 出 强 马 氏 性 定 
理 . 

定理 3. 16 ( 强 马 氏 性 ) 若是 一 个 时 齐 离散 参数 马 氏 链 , 则 


E 也 是 具有 同样 转移 概率 入 阵 的 己 氏 链 , 基 中 
éA {Ea } 
而 rtw) 是 - -个 对 上 的 停 时 ,月 Prfo) < 十 0) 二 1 


证 明 直接 验证 满足 马 氏 链 的 定义 , 即 考 罕 








POR pt] 一 Fé ry 一 i reain | 一 fF 1 En 一 - in) 
= 一 Lbs 11 一 EE Go on i Et Yi +n 1 一 2 + rw 一 ra) 
PE cnt 一 Ey 1 让 
《3. 251 
上 式 分 于 为 


SPlriw) = ow) 一 i 


中 一 辣 
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SG (0) i = 0), {3. 26) 
册 于 fairko)y 一 亡 ) 二 wT) 1 应 
由 名 Co Cw) 全 (w) 完全 决定 ;也 就 是 说 它 是 使 这 些 随 机 
变 基 满足 某 些 条 和 件 的 那些 组 成 . 所 以 
Pet) kB tw) = pa) = = 1 ) 
= Poel) kt = pA: 
问 埋 
Plasrtw) = RE 一) 
一 Plwsr(wm) = Gm) = i pp 


于 是 53. 26? 就 变 成 


Ee 
| 





> ,Pluto) = 0) = tn} po pep 


二 
一 Plat tte) = Ip pp 
同样 (3. 25) 的 分 母 也 应 为 
Pmt tt) = ii) pp 
从 而 (3. 25) 等 于 p,. 定理 得 证 . 
类 似 地 ,我 们 还 可 以 证 明 以 下 强 马 氏 定 理 ; 
定理 3. 17〈 强 马 氏 性 ) ”在 定理 3. 16 的 条 件 下 , 若 r(w) 是 
一 个 停 时 征 了 Ptrew) 之 oo) 一 1 ,4 与 训 分 虽 是 由 &(w) 存 tia) 之 
后 与 rtw) 之 前 决定 的 两 个 事件 , 则 j 
PrAléwm = 11B) ~ PlAIE, = 7). 
特别 当 A= fm: 二 = 一 就 有 
下 = ios nm = | = 1B) 
= Pw = ji = 
注 : 对 停 时 rtw) 类 似 于 命题 3.2 的 结论 也 成 立 . 


3. 第 k 次 到 达 :的 时 刻 to) 


EE 


设 * 是 常 返 态 , 而 tlw) 家 未 《第 二 次 到 达 ; 的 时 刻 ,即今 
7 





fm) 一 inf oo 一 了 
te = inf = Cn 2 

儿 二 1 加 (一 上 一 人 :和 (一 站 让) (wj (tw) 中 恰 有 nn 次 
为 疡 即 人 C0) = 发生 吕 次 是 可 必 各 to 人 2 衬 1) 都 蚌 停 时 . 又 由 强 
王 开 性 ,我 们 可 以 得 到 fr Cnet) 及 其 中 心 (四 全 
te) 1)) 是 一 个 1.i.d. 的 随机 变量 州 .这 是 因为 注 
意 到 名 Cw) 三 1 ,我 们 有 
Plwsratto) — |Fa 一) 

0 RS ns = |é i = 1) 

一 人 必 ) 

二 站 ii 于 | 站 一 了 了) 
其 中 六 一 15 (一 5 sri 一 5 是 (to 前 发 生 的 事件 . | 时 上 式 
窑 导 有 边 与 ,osm | 肥 信 无 闫 ;从 而 (0) Ej rT 
me 相 丘 独子 同 分 布 .而 征 着 (olr 一 一 CY. 

由 独立 同 分布 序 列 的 关 大 数 定律 有 ， 


—1 Dn tw) — Ern(w) tn Tx ) 
1 


m1 











其 中 
Fo ~ Em) | = = SAY A Lp. 
[3 
男 -方面 ,车 令 和 (9) 二 在 (Cw) ,rs6,(w)) 中 等 于 i 的 次 数 , 则 


> ND) - lw | 
和 一 如 二 co) 一 


上 一 


1 x . 1 <， 
EG = op, hk). 
EIS) 


由 定理 3.12 有 : 


- ,A (Cw) 。 ] a 
一 一 一 NA 下 〗 一 
如 n lim nn = Pet ) 人 


nw- | 
由 于 如 (0) 一 (ww) 一 人 /to) 及 N,(w) 的 定义 ,我 们 有 
下 一 】 





te -1 Nl 


i 全 ro Ea nw), 
不 -= 


1 k=1 


从而 当 Ne) on 十 500) 时 "就 有 概率 为 1 地 


a 
， 1 WO i 2 
A = lim Nt se) = lm Nw 
所 以 (在 定理 3.18 所 面 的 注 ) 
"| Nt ) i 1 
cade 


好 


(rn ce) 





面条 件 Nto) -> 十 on 二 coc) 在 : 常 返 时 一 定 成 立 ， 
“ 注 : 事实 丁 , 因 为 其 余 集 的 概率 为 


PAN + op = PU MN, Cw) < m)) 
去 >)P( IN < ma) ( 往 意 N 所 No 
wl 四 


一 > limP N.Cw) < my 


ml 


= > lmPe, > a 
Hm ] mM 


ml . 
一 0 [注意 ;一 二 > na 十 oo]. 


综 上 所 述 ,我 们 得 到 下 面 进 -- 步 刻画 二 的 定理 
定理 3. 18 当 i 是 一 个 常 返 状态 时 , 则 概率 为 1 地 有 


lim EN, Cw) 一 疡 1， 了 一 


1 
My 和 


其 中 上 = TDi(olata 一 让 一 六 AD. 当 / 是 非常 返 状 态 
时 ,limpuGo) = 0, 因而 也 有 
站 一 站。 

推论 1 设 /是 状态 空间 $ 上 的 -- 个 实 画 数 ,是 有 限 状态 不 


可 约 常 返 马 氏 链 ( 即 只 有 -一 个 常 返 类 ), 刚 概率 为 ] 地 
7 





lim ~- ! >/ = 和 上 2 
证 明 ”由 于 
FE) 一 DDT Eb), 
批 们 让 即 由 定理 得 基 


1 a _ 1 ”na = 
= ze 
一 2 EP 
-™ | 1 1 > = FY 
= 0 rN) 之 ee 
推论 2 选手 不 可 约 , 常 返 ， 和 i 与 7， 
一 im Tp, 《二 ) 一 一 
古 见 工 是 每 行 都 相同 的 矩阵 ,而 且 7 或 全 天, 丰 全 不 为 过 
证 示 由 于 工 No) 一 1/4vh So 可 见 ， 
5 TN, tw) /= J (2 一 十 on)， 
得 前 面 定理 的 证 明 中 已 得 到 
1 、， 1 导 、 li ， 
,NCw) = US)) 一 元 之 Po = 站 


一 pt) 一 了 

“于 是 了 一 17A 

* 注 :此 了 丙 处 我 们 事实 上 承认 了 

各 BAM) 一 各 [二 

对 状态 空 闻 是 可 数 的 情形 ,在 数学 上 上 要 严格 说 明 这 - : 步 的 正确 狂 要 用 到 测度 
论 ( 详 见 §53.7 段 ). 

对 六 面 册 于 二 的 各 状态 生 通 ,对 任意 -状态 主 与 六 者 存在 
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本 整数 贱 与 NN 使 得 
pM 0 plN) > 
于 是 pM 一 和 ND) 字 记 ,CM pt,(N). 由 此 得 到 


n+ 


mn, ,pe = ,Jim 二 店主 2 
。 全 


一 lim ,Dp MTN+A) 
mr 1 站 上 


1 | 
六 Ji ,pr kp MD pr N) 


— Tp pCN), 

嫩 ,>0* 玉 人 请 "二 0”. 可见 5 中 有 一 -个 状态 j 使,, 汪 0, 就 加 有 
全 部 = 70. 

定义 3.7 对 常 返 状 态 志 车 有 二 .一 0, 芭 p 一 kf) = 
二 , 则 称 为 零 常 返 状态 ; 若 志 .一 0, 即 上 < , 则 称 了 为 正常 
返 状 态 . 

推论 2 说 明 一 个 互通 常 返 类 中 的 状态 或 全 部 是 正常 返 ,或 全 
部 是 岭 常 返 . 当 是 互通 零 常 返 时 , lim 小 和 p(k) = 一 0 而 得 
不 到 一 个 本 变 分 布 x 一 (ntjE 5) ,内 为 这 时 全 部 <, 为 零 ,不 成 其 
为 分 布 了 , 其 实 这 时 根本 不 存在 不 变 ( 概 率 ) 分 布 . 

推论 1 对 于 马 氏 链 的 概率 特征 的 统计 具有 十 分 重 归 的 塌 义 ， 
它 告 诉 我 们 - -个 蕊 氏 链 的 函数 的 数学 期 望 等 数值 特征 都 可 以 用 此 
马 氏 链 在 一 条 轨道 上 的 现实 来 估计, 下 面 的 推论 3 给 出 了 (p,) ,7 
的 强 相合 估计 量 ( 清 参考 数理 统计 中 强 相 人 台 估 计 的 定义 )， 

推论 3 对 于 不 可 约 正 常 返 马 氏 链 ,我 们 以 概率 为 ] 地 有 ， 


Tps = lim nT Sl, (EC 1 Fim)), 


了 lim n 1 Ss)), 


了 多 





2 1, Ei Cm)) 


££ _ 





pp; — lim 
四 ~ ] (Sm)) 


在 


证 明 由 于 No) -人 1 (ko))、 因而 本 推论 的 第 一 式 


是 定理 3.18 及 推论 2 罗拉 宫 上 为 了 得 到 第 -一 个 等 式 , 考 虑 状态 
宝 间 2 一 Go 人 上 的 如 下 马 氏 链 
Wy) = (Es, 














于 是 由 
POR 77 = 
的] = Tot) 
= PR) 帮 一 
Si {wy = 和 = to) 
= P(e vt) = 了 wi 一 了 | To 一 i) 一 Ps * 
可 见 fo 二 0 也 是 一 个 马 兵 链 , 可 以 验证 13,) 仍 是 年 
通 的 . 常 返 的 ,而 且 直 {z,) 是 的 不 变 分 布 可 得 
人 > 让 总 人 "ad = Oo", Pn: Li 一 I Dp 
再 将 定理 3. 18 与 推论 2 用 到 {加 } 上 ,就 得 到 


A 1C00)) 





dn-] 
| ~ A 
ln 0) 0)) —* Tp 当 本 


最 后 ,第 二 式 是 第 - -- 式 的 直接 推论 , 定理 证 毕 ， 

若 将 {7.} 取 为 不 可 约 正常 返 马 氏 链 的 初始 分 布 ,我 们 就 得 到 
人 沪 0} 尾 一 个 平稳 过 程 , 而 且 对 任意 有 界 函 数 了 概率 为 1 地 
有 


lm E00 = Df Ef. 
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困 而 有 时 人 们 也 称 不 可 约 正常 返 马 氏 链 为 遍历 链 `. 
* 证 * 衣 参 弄 第 七 章 壳 睫 定 理 . 


$3.5 禁 尽 概率 . 首 出 时 `. 首 中 时 与 首 中 分 布 


1 概念 及 关系 
叔 原 以 x 为 状态 空间 的 马 氏 链 15.}. 设 4 是 :的 一 个 子 集 . 
定义 3.8( 禁 忌 概率 ) 市 i 出 发 ,经 m 步 到 达 j, 帆 禁 鼠 讲 入 
4 的 概率 指 
Po; 对 0 mm 之 2 部 有 B00) 千 A,(w) = 让， 
以 后 我 们 把 它 沁 为 pn), 
上 而 的 定义 意思 是 aptn) 表示 从 i 出 发 的 条 件 下 .经 wn 步 & 
达 j, 但 是 在 此 之 前 其 未 到 过 4 的 概率 . 
定义 3. 9 ( 首 中 时 与 首 中 分 布 ) 我 们 将 & 除 时 刻 0 以 外 首次 
到 达 4 的 时 间 
tat) = nln Oié tw) € A! 
称 为 € 对 4 的 普 中 时 ;而 把 
六 (osmafo) + co = 
称 为 从 7 出发, 首 中 4 的 分 布 ( 当 PCri(wy 一 = 一 1 时 , 首 中 4 
的 分 布 是 概率 分 布 ,否则 之 P(r < = 让) 可 能 小 于 1). 
久 舍 " 
Ce) = inffin > ot Cw) & AI, 
“ao) 称 为 < 对 4 的 首 出 时 . 事实 上 , 令 忆 = 4 一 co 一 4， 则 我 们 有 
alt) = Fela), 
不 难看 出 ,以 上 概念 之 间 有 以 下 关系 ， 
命题 3.19 1) ,p(n) 一 Pirate ) = 又 当 j 区 A 
竺 我 们 有 
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PC ra > nd) — 1); 
而 当 jE 4 时 在 
p00) = Pri) — nt (wm) 一 万， 
2 pn PE OE BY mn tm oe 7) 
一 (PY i 本 人 .了 一 由)， 
其 中 了 Ps 一 CP ps 
31 P(ratwl > 1) — CDE1Y, = DY iE BA; 


Ey 
4 Prew) < oo) 一 ] 时 有 
EL,rTatw) = [ PI). 

上 式 缠 含 等 式 沽 边 同 时 有 限 或 无 腿 ). 

证 明 1 在 昌 中 的 各 论断 是 定 沁 的 直接 推论 ， 

2 ) 当 ?= 一 1 时 有 3480 一 如 :下面 我 们 用 归纳 法 . 设 对 天 7 
仿生 等 式 p(n) 一 (PB),, 正确 ,于 基 

pon DP:tr(w) 守 nD 
= Plwrto) nt = 60) = 


ff 








= pr Pw 二 fo) 一 了 | m1/) 


工 月 


= DP py = (PEL),,. 


让 
由 归纳 法 2 得 证 . 
0 (Cw) 让 A) 


= >,D, KTA(w) wv) = 站 


Li 


-2 Ptn) = Dy PY, 


EB 


pst) (1 为 分 晤 全 为 ! 的 列 间 量 ). 
4 当 《ri(w) 之 00) 二 1 于, 我 们 有 


Lo ral) Sp (wratw) = RY 一 E> (Cowralwm) Co ky 


r=1 
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= - >> P, (wralw) APP C0 TA LW) Er 1) 


"= 三 1 


-> Prt) 人 站 一 (Si) . 


| 


命题 3 苦 状 态 焦 5 满足: YPE 如 均 有 了 (rw) < 2) 
je 一 这 ; 则 对 Yi) 亡 吾 有 


Sr < (3. 26) 
及 
(他 Pi 《3. 27) 


舞 则 ,如 果 对 于 YY¥ :所 如 均 有 
prntw) op) 1. {3. 28) 
那么 我 们 有 
下 re 一 [一 Poy 下 《3. 29) 
(Plwé, Co = ,es= (I— Po) (pe)ics. 《3. 30) 
证 明 1) 邻 DABDDC.， 


~ Par 所 15 
Pr 8,, kED, 
B= (pr). 


显 见 用 户 代 圭 P 时 ,相应 于 命题 的 条 件 仍然 成 立 . 然而 PD 在 户 下 不 
可 能 到 达 石 以 外 任何 状态 . 下 见 在 到 下 除 五 外 都 不 是 常 返 态 ,故而 
Spun) < ee， 

得 则 ,对 充分 太 我 们 有 
(PDs = ppy la) = Pl), 
所 以 (3,26) 成 立 . 
-方面 ,我 们 有 | SPy| Ps = = Dr- = | Sip, -1 


一 


2 





就 是 

| > PS 一 Ps) = HI. 
类 伺 地 

Pol 全， lL. 
从 而 得 到 (3. 27). 再 利用 定理 3. 19,4) 及 2 和 马 氏 性 便 得 到 在 
3, 28} .03290) 及 (3, 3 站 的 正确 性 . 

推论 ”车 状 态 集 愉 为 有 限 集 和 台 且 有 
并 0 














则 
Er 一 SDAAV/DEA), (3. 31) 


及 对 jE A 有 
Pot 0) = Ooo DA GDN/DEAY, {3.32) 

其 中 (0B) 表 示 必 一 Pe) 的 行列 式 , 旋 , 表 示 d 一 Ps) 中 位置 在 第 j 
行 第 列 的 元 的 代数 余子 式 . 

证 明 对 于 总 = 4 ,由 命题 3.20 及 首 朱 阵 的 化 数 余 子 式 表 
东 立 得 (3. 31). 又 (3. 30) 碟 方 是 方程 

(人 一 Po 一 (Pen (BA) 

的 唯一 解 ,利用 克 莱 姆 法 则 使 得 到 (3. 32). 


2 蛋白 上 质 演化 的 马 氏 链 模 型 


本 节 问 题 选 自 RN. Curnow 的 论文 :“The use of Markov 
chain models in studying the evolution of the proteins ”,T The- 
or, Biol, C19882134,.51 -7, 

于 而 我 们 用 前 而 讲 过 的 马 氏 链 的 知识 来 解决 这 一 和 问题， 

筷 白 质 是 由 许多 氨基 酸 构 成 的 , 全 部 氨基 柄 共有 20 种 ,它们 
分 别 是 由 选 自 (Li，C,4.G) 4 种 核 甘酸 的 三 庆 组 编码 ; UUU， 
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OO AU GG ( 共 64 种 ) 组 成 ( 详 见 表 3.1). 在 
重 和 月 质变 异 过 程 中 , 编 查 发 于 如 下 变化 :每 次 变 引 只 允许 在 一个 接 
仔 酸 变化 为 其 他 3 种 惊 庄 酸 ,于 足 从 每 个 确定 的 编码 出 友 ,变化 后 
的 可 能 站 末 闪 有 有 种 ,例如 44 可 以 灾 为 44042107 
ACAAAALACAAGAALAA9 种 . 又 设备 种 恋 化 居于 等 
的 ,于 大吉 A4 转 备 以 的 概率 分 别 灾 为 二 述 9 种 之 -于 是 氢 基 
梧 编 如 的 恋 时 号 居 -个 马 氏 链 这 上 .其 中 志 表 示 在 时 刻 二 的 氨基 
南 的 编 公 . 车 按 六 上 典 排列 法 (学 秤 以 ,0 ,4,0 为 序 ) 将 64 种 氨 
基 酸 编 友 撤 序 排 络 , 则 SS 一 UUUG, (GGY 是 其 状态 室 
里 . 其 转移 髓 率 陈 如 下 ， 





[到 1 I "| 
1l1 E 1 了 
Po ;| | ， 
37 了 五 | 
(1 1 IE 
睦 中 了 六 16 x 16 单位 阵 ， 
* 1, TL 
pi | 
I FL, 
I, fF 
4== 生 庆生 单位 阵 . 
0 1 1 1 
Fp i101 i 
1 10 14 
1 1 1 o) 


容易 看 出 PP 是 不 可 约 的 (互通 的 ). 
但 是 在 64 种 编码 中 UUA,UGA,UAC 三 种 蚌 “ 死 状态 "，, 苍 -. 
且 演 化 到 它们 以 后 .氨基 酸 就 术 再 演化 . 其 含义 译 为 马 氏 链 的 语言 
号 是 考虑 将 一 种 * 死 状态 " 氏 成 的 集合 列 为 禁忌 集 4 还 有 61 种 编 
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三 构成 20 个 氨基 酸 , 所 以 :个 需 基 酸 中 可 能 包含 不 后 1 各 的 彤 箭 
(机 表 3 在 RNCuraow 的 论 诡 所 提出 的 , 寄 烛 研 罕 的 辐 肿 还 ; 
1) 失 :氨基 酸 BRB 出 发 ( 设 同 个 得 基 酸 的 蔡 编 耕 都 FP 入 

和 均 深 这儿 少 深 变异 而 后 “ 死 [ 

2) 从 共 :多 基本 Bi 训 是 编码 组 成 的 某 个 集合 } 溃 党 .放下 
"前 到 达 乌 其 通 B; 的 次 数 ， 

31 没 宁 巡 分 布 在 备 氨 共 酸 臣 均 杀 的 (但 是 由 于 各 个 氨基 酸 声 含 
编 侣 数 是 不 相等 的 ,所 以 初始 分 布 在 全 体 编 码 上 并 不 十 均 ), 求 演化 过 
程 中 在外 二 挤 到 过 各 贫 基 酸 的 半 均 次 数 . 

入 B, 家 示 第 种 氨基 酸 中 所 含 编码 的 集合 , 设 BB, 中 编码 的 个 数 
为 避风 将 1) ~37 译 为 马 开 链 的 语言 ;我 们 有 下 而 的 11 一 3)， 


1 求 二 全 让 SEsrCo)) (这 里 二 为 二 个 * 死 状态 ”的 集 








PR A EE 
全 :A OGA AG }., 
事实 上, 令 下 二 机, 则 册 (3,.29) 及 (3.31) 
1 ns 3)1)e 一 应 oF AT Poy ‘Ye 
二 Ee 四 


= N22 > Da B/D). 
上 E- 生 ， 可 页 


其 中 Pet23 是 地 一 Po) 的 < 行 了 列 的 代数 余 了 式 , PP 是 (7- 
Pn) 的 行列 式 . 
Ta 
2) 求 六. yy DE > LS 1 ， 
NE 下- 
事实 | ,由 命题 3.19 之 3 与 4) 我们 有 
sn) 1 
1 1 Nr, ~ | 
gr 一 - 下 


EE n=1 


i: >) 5 > iT) oo) 一 也) 


EE 和 民品 机 一 站 








Sn (Ba A) 
Ms A DB) 
1 Ta 1 30 
~ , 
3 ) 办 会 而 这 er D3 lp C8.) = 和 和 





值得 指出 的 基 : 在 生物 学 中 ,有 时 也 考 韦 以 氨基 酸 为 状态 ,但 
是 如 果 我 们 现在 的 框架 是 合 理 和 的 话 ,那么 以 氨基 酸 为 状态 的 塞 界 


过 程 就 不 是 马尔 可 去 的 (参见 本 节 习 题 }. 
表 3.1 手 基 酸 编 ( 密 } 码 表 














名 称 编 码 疮 称 编 码 
Phe 基 西 哲 酸 UU CC Hs 组 握 酸 CA CAC 
Leu 亮 握 酸 、 UACUCG CT , Gln 党 氢 罗 腔 CAACAG 
COC CUA CU 
lle 异 亮 手 酸 44407774 上 sn 天 门 伴 酰胺 AA ,AAC 
Met 旦 手 栈 。 AUG Lys 赖 所 酸 用 人 ar 
Val 纺 气 梗 。 GUDGUC,GUA,GUG Asp 天 门 补 氨 梗 GAL 1GAC 
Sei 些 氮 梧 OU UCC UCA, lu 行 氨 酿 GAAGAG 
OG AC AGC 
Cys 交叉 手 瞪 UG Trp 色 氢 酸 UGE 
Pro 腿 状 铝 COT OLE COA CCE are 精 气 散 CAA OCU CCGA, 
Ce ,AGUA AGEG 
Thr 苏 气 般 4CT ddCd Ce 上 1 二 气 酰 OU OC TA GOO 
Tyr 酷 阁 酸 A ,AC 廿 氢 酸 GEL ,GOC CC 


些小 编 栈 Cd EAGT 





383.6 应 用 例题 


1. Gibbs 样本 生成 法 (Gibbs Sampler) 


在 许多 很 复杂 的 统计 问题 中 ,有 时 很 难 对 各 种 统计 方法 进行 
理论 分 本 ,为 了 评估 它们 的 优 劣 ,常见 的 实用 办 法 是 作 随 机 模拟 ， 
B6 








妈 设 法 拷问 匮 的 要 求 与 菜 件 去 构造 出 - :系列 摸 拟 样 本 ,对 它们 试 
用 我 们 提出 的 统计 方法 作 统 计 推 新 ,观察 对 这 些 伐 拟 拉 而 作 出 的 
排 断 的 止 确 率 . (iibbs 样本 生成 法 就 是 一 种 有 将 可 行 的 高 维 分 布 
总 栖 的 样本 生成 法 . 它 的 基本 想法 是 构 告 :个 不 可 约 下 常 返 的 马 
氏 链 上 一 1) .使 得 这 个 马 氏 链 的 不 蛮 分 布 正好 是 某 个 给 定 的 分 
布 x( 凤 前 而 所 提 到 的 高 维 总 体 ). 由 十 当 ”充分 天 时 ,有 的 分 布 
渐 近 于 分 布 x .所 以 这 时 名 可 以 近似 地 作为 以 x 为 分 布 的 总 体 的 
样本 , 本 这 考虑 的 是 可 数 状 态 ( 设 状态 空间 为 7) 乌 氏 链 , 所 以 我 
们 这 里 只 对 十 在 可 数 集 上 取舍 的 分 布 来 讨论 ,但 其 处 理 问题 的 
思想 也 适 胃 于 后 成 连续 分 布 的 随机 变量 的 样本 ， 

我 们 知道 ,给 定 一 个 - 维 分 布 , 容 易 得 到 -个 以 它 为 分 布 的 随 
本 变量 的 伴 本 ;例如 可 以 简单 的 利用 SAS 软件 得 到 . 但 是 给 定 一 
个 维 (mm 六 1) 联合 分 布 ,特别 是 当 m 较 大 时 .事情 就 远 非 如 此 
简单 . 令 人 会 X… X57。, 其 中 人 7, 对 不 向 的 i 是 同 --- 个 维 空 
间 . 设 给 了 一 个 避 维 联合 分 布 天 (mi + 我们 考虑 旭 下 的 


























Ps plr,y) 一 lI Ry Ys a Lit edn}, 
4 


(3,33) 
其 中 了 一 (rer 一 CY EE 2 肌 
TV yi Wes ye 1 ) 
是 在 除 第 个 分 量 外 ,将 第 1 至 一 1 个 分 量 固 定 为 yj,y,,-…， 
3 并 将 第 有 十 1 至 第 个 分 量 固定 为 zx，，… ,7 的 条 件 下 第 
个 分 量 在 % 处 的 条 件 分 布 . 

我 们 来 验证 (x ,z,,… ,x。) 正 是 以 (p,.,) 为 转移 阵 (请 读者 
自己 验证 (p..,) 确实 是 一 个 转移 阵 , 即 5p,, 一 1 ) 的 马 氏 链 的 
不 变 分 布 . 事实 上 ,我 们 有 | 
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rl 


-一 > ， > DY rn Ci Tm TY [ar sn) 
四 31 
A TR 


四 | . 
~ > ， a > ROT rT 去 ; 
> RT To Te 

人 


上 





A NEY 1 31 mg Ye a Ym 1) 
VY Ty see se) 
I 1 sy 


六 A Ys ly Ty Ym | 和 ] 


= >) 2 人 Tirevaay Tn) 
Tm xm 一 1 Te 


TY) Ye) Ey Tn) 
ES 9 
I 





om | 四 本 


Ty ya yn) 
rty, so sm -1 ,TI) 





了 
可 


— SxrCv, Vay 了 Xx 
2 i sm 1 im 和 
和“ 


= XCY Yn) 

我 们 需要 指出 : 

1》 我 们 并 不 需要 知道 re ,xo.… xm) 的 表达 式 究 竟 是 什 
么 ,而 只 需要 知道 在 固定 其 他 - - 切 分 量 的 条 件 下 ,余下 的 基 -个 分 
基 的 条 件 分 布 ,就 可 以 得 到 以 (p;.…) 为 转移 阵 的 时 齐 马 氏 链 的 
样本 . 换 包 话说 , 当 z(tziyz2,""7 rm) 相差- -个 常数 因子 确定 时 ， 
《 疡 就 完全 确定 了 . 

(2) 由 蕊 氏 链 和 to) 的 样本 法 求 得 下 一 步 寺 41 Cw) 的 样本 时 ， 
内 于 在 人 3. 33) 式 中 的 ps 是 一 维 条 件 分 布 的 乘积 ,获得 遵从 这 些 
一 维 条 件 分 布 的 样本 时 ,我 们 可 以 利用 生成 比 一 维 分 布 的 现成 统 
计 软 件 , 邮 可 接 以 下 程序 逐个 得 到 名 .1(&w) 的 样本 的 各 个 分 项 
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(va 
先 得 到 服从 分 布 {zy 1zas ow)73y: 安 .71 的 随机 案 其 
S109) 的 一 个 样本 : 

再 得 到 服从 分 布 {ryslysie rn) Ys EE Sa 的 随机 变量 
Ett) 的 -一 个 样本 yz ; 

依 此 下 去 ,得 到 服从 分 布 {xys Ye om) NE 
万 7 让 的 随机 变量 夸 _ .4 人 0) 的 一 个 样本 yt 二 1 1); 

最 后 得 到 服从 分 布 {zrG6 om :ym 人 2Yw)} 的 随机 并 
量 sf 的 “个 样本 yw . 

定 艾 

y 全 Cyan) 

它 就 是 二 to) 的 个 样本 ， 

现在 人 性 取 人 (0) 二 按 王 面 方 法 可 以 得 到 名 Ca) 的 一 个 样 
村 Yi 对 本 是 纳 地 可 用 上 面 方法 得 到 外 fo .er ,&(ew) 的 样 
本 yy 当 半 大分 大 时 ,出 于 马 民 链 名 (wo) 的 分 布 近似 下 
Teizasso)， 我 们 就 可 以 认为 ”就 号 5( 近 伏地 ?服从 分 布 
reteeorew) 的 一 个 样本 . 

因为 这 里 用 了 模拟 马 氏 链 的 患 想 , 所 以 Gibbs 样本 生成 法 叉 
称 为 马 氏 链 Monte Carlo 方法 . 


2. 可 道 马 氏 链 


正如 3.3 例 3.6 中 给 出 的 马 氏 链 那 样 . 一 个 马 氏 链 可 以 在 
- 些 状 态 间 ,按照 - - 定 的 网 络 结构 转移 (该 例 中 备 状态 即 各 车 站 )， 
状态 之 癌 按 车 站 间 是 要 有 道路 而 规定 联结 . 该 过 程 在 每 一 步 的 状 
态 迁 称 只 能 沿 网 络 规定 的 可 能 状态 进行 . 在 例 3. 6 中 ,这 种 迁移 就 
是 汽车 每 次 从 它 当时 所 在 车 站 随机 地 选择 一 个 有 道路 直接 联结 的 
车 站 前 进 . 进而 ,我 们 还 可 以 考虑 在 网 络 中 相 邻 的 两 个 状态 ( 设 为 
状态 证 访 之 间 有 阻尼 ( 设 为 负 ,一 已 >0) 的 情形 ,并 规定 由 状态 i 
过 移 到 状态 了 的 概 党 与 阻尼 成 反比 , 即 
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Pa 
这 里 ,% = | 了 去 | 。 这样 的 马 氏 链 具 有 -个 重要 的 特点 ,存在 


p< 二 {po， pew 使 得 
A Po = Fr Pn: {£3,342 
这 里 我 们 可 以 取 j = Cia, 一 (311/64) ,于 是 我 们 就 有 
apo= CB, — CB ~ pp 
定义 3.8 (可 逆 马 氏 链 ) 设 马 开 链 6 以 PP 为 转移 阵 , 若 存 
在 分 布 中 = 人 Ap) 使 得 部 记 APGCY jE 和 NY) (对 
N 一 十 9 的 情形 ,定义 同样 适用 ) ,出 称 为 -个 可 递 马 开 链 , 称 
之 为 的 可 道 平稳 分 布 (或 可 道 不 变 分 布 ). 
事实 上 ,pg 是 PP 的 一 个 不 变 分布 , 因 为 
Dp 一 Dp = 
于 是 正如 3.3 指出 的 :车 将 上 的 初 分 布 取 为 we , 则 上 是 一 个 分 布 
按时 间 平 移 不 变 的 随机 过 程 (也 称 平稳 过 程 ). 不 公 如 此 ,这 个 过 程 
还 有 对 时 间 倒 道 的 不 变性 , 也 就 是 说 ,如 果 将 时 间 反 过 来 看 ,该 过 
程 的 分 布 不 变 : 对 Y ms 
Pl (CE) 一 i 一 i ) 
Pa Ps pa TT nd Pr = 
Pr pera Pr hn = tpi Ds po spe, 
一 Plw:é (tw) = i tn) = i 0) ~ 1 ). 
于 是 我 们 有 
命定 3.21 为 以 为 可 道 平稳 分 布 的 可 道 马 氏 链 当 和 且 仅 当 
从 初 分 布 & 出 发 它 成 为 平稳 过 程 ,而 且 对 时 间 倒 逆 分 布 不 变 . 


在 $3.3 例 3.6 中 ,==1,a 一 地， 其 中 丸 表示 从 出 发 走 


- 步 可 到 达 的 车 站 总 数 ， 
90 








中 若 网 络 能 将 全 部 状态 联结 成 : 体 , 则 上 述 过 程 艾 一定 只 有 
-个 互 遂 常 运 类 . 于 是 利用 互 道 常 下 类 的 马 氏 链 扎 不 亦 分 布 唯 - - 
性 ($3.3 命题 3. 13)，, 便 得 到 








TO FD & 一 a Nn 
这 样 $3.3 例 3.8 的 不 变 分 布 是 

x 一 之 二 二 Ts = 3 Ts :之 

6 8 7 16” ?6 8 

nr , xl, r+. 1 

{67 5 8 "6 4 


结果 正 是 例 3.6 中 已 经 通过 解 方程 得 到 的 ,但 是 这 里 我 们 利 
用 了 可 道 性 ,从 而 不 必 堵 解 方程 ,算法 就 大 大 简化 了 . 

在 物理 上 (3. 34) 称 为 细致 平衡 条 件 , 这 是 因为 由 (3. 34) 可 得 
一 个 等 价 条 件 : 对 Y az 

Pol 一 ppr tn), (3. 34)! 

它 的 含义 为 ;经 过 任何 时 间 > ,对 任意 一 对 状态 人 ,六 ,从 ;到 了 的 
概率 上 za 总 与 从 了 到 5 的 概率 gp, (tn) 一 - 样 . 
例 3.7 (Z 上 生 灭 链 ) 设 p 十 = 二], p, 让 0,g 让 0,( 二 0， 


产 ， 了 一 了 十 1 
Pi = das 了 一 上 ~- 1 


OO, 其 他 . 


iT (pigiti}l, 0; 
以 一 41， 
Tap 站 
那么 当 2 < cs 时 我 们 有 
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Hp 一 papss 
其 中 心 一 过. 因而 以 也 为 转移 阵 的 马 氏 链 是 可 复 的 . 





了 > 
例 3.8 全 
rl1 1 
| 2 "| 
: 1 1 
-0 2 Zl 
|1 | 
[了 ?32 


我 们 证 明 以 己 为 转移 阵 的 马 氏 链 & 不 是 可 逆 的 . 事实 上 ,如 果 雇 
设 $ 是 可 化 的 , 即 (3. 34) 满 足 , 那 么 4 一定 是 的 不 变 分 布 . 求解 


方程 


可 知 
1 1 
ET la's'al. 
但 是 对 1 一 1 或 2, 我 们 有 
Pog 一 村， > 3*0= 尖 0， 
妇 g 本 满足 (3. 84). 这 样 襄 导数 了 牙 盾 . 从 而 # 不 是 可 逆 的 . 
可 道 马 氏 链 比 起 一 般 的 正常 返 马 氏 链 有 两 个 显著 的 优点 : 
(1) 在 可 逆 马 氏 链 的 状态 集 7 中 取 一 个 子 集 7,, 并 将 5 
外 的 状态 都 看 成 “反射 整 ", 则 得 到 的 新 的 马 氏 链 仍 为 可 道 的 ,而 且 
后 少 的 可 逆 不 变 分 布 是 前 者 的 可 道 不 变 分 布 在 5 上 的 限制 ,但 
是 一 般 不 吓 约 正常 返 马 氏 链 作 同样 的 “反射 壁 " 新 链 后 ,后 者 的 不 
变 分 布 并 不 是 前 者 的 不 变 分 布 在 ,上 的 限制 . 
(2) 可 道 不 变 分 布 可 以 简单 地 用 户 ,明显 表达 ,但 是 一 般 的 不 
变 分 布 必 须 通 过 解 方 程 & = pP 得 到 ( 当 5 的 状态 数 NN 很 大 时 ， 
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解 这 个 方程 的 计算 量 是 很 局 人 的 7. 
以 上 两 个 优点 分 别 对 应 下 列 两 个 命题 ， | 
命题 3 22( 限 制 在 状态 于 集 上 的 可 道 不 灾 分 布 ; 设 可 这 
马 长 链 二 以 成 为 转移 阵 , 以 产 为 吉首 木 蛮 分 布 . ,是 状态 集 的 于 
集 . 令 
Pe (pp) {i,j € 8.), 
iy Eo ,HH 


那么 以 了 为 转移 阵 的 蕊 氏 链 为 可 道 的 , 它 的 可 道生 蛮 分 布 为 
££ {Cai€E Su C=( Sa 


ea 
Ee EA 
a 


证 明 。 当 j 光 1 时 有 ,二 pp ;所 以 
Jp 一 Cap 一 Cp, 一 ps. 

这 说 明 是 的 可 着 不 变 分 布 .命题 证 毕 . 

男方 面 , 读 浓 可 自行 验 撑 ,在 例 3.2 中 如 果 取 ,一 和 1,21， 
那么 己 的 不 塞 分布 必 一 [号 .二 , 二 | ,而 六 的 不 寞 分 布 不 是 二 
| 去, 雪 | ,其 原因 在 于 不 是 可 着 的 

定理 3, 23(Kolmogoroy 可 逆 准 则 ) 芋 通 的 有 限 马 氏 链 为 
可 池 的 当 生 仅 当 如 下 条 件 满 足 ， 

(RR) 对 任意 一 个 “状态 环 路 ?i -> i -> .> 1。 > 让 但 有 

Pi trea Pon, Pr 一 Pim Pia ts Pr Ps, 

这 时 对 任意 到 定 状态 iE 及 状态 局 存在 i 到 过 关 记 ) 的 

-条 通路 i rm in : 潢 足 
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kl 
而 旦 的 可 道 平 稳 分 布 上 二 (14) 为 


wv 1 


机 -| Ts 
其 中 = = 一] 才 人 (可 呢 2 可 用 pr 简单 地 表达 )， 
- 般 攻 通 : 5 的 钾 也 有 对 应 的 定理 ， 请 见 * 3.7 附录 中 的 3， 
证 明 必要 性 的 证 明 ， 


首先 ,对 主 呆 逆 平 称 分 布 下 必 存 丰 六 使 产 


让: 


,这 0 而 对 其 他 的 i 
pai 由 于 互通 怕 必 六 在 使 疡 2) > 0. 利用 可 逆 条 件 (3 34) 
我 们 有 有 


pp 

冉 左 边 恒 下 , 帮 有 癌 守 0. 可 网 记 守 00 (YY 让 
任 取 -一 条 通路 i 一 i 一 … i 一 1, 利用 (3. 34) 季 次 我 们 有 
二 Pott Bra ho = 1 


m 一 Pi Pip pi A 
由 左边 恒 正 , 推 出 右边 虱 正 ,并 和 且 对 应 的 上 为 所 /4 > 0， 


[RE (1) 一 pr. Cn), 


a=1++ 了 如 = 





A 
充分 性 的 证 明 . 

普 先 我 们 注意 当 启 取 定 后 ,对 i 关 志 在 定理 中 定 
i 的 通路 取 法 无 关 . 


光 的 上 与 司 到 
十 实 上 , 没 Ki ,RK 为 术科 了 的 两 茶 不 同 通 路 ， 


Ri I! 三 1， 
Ry: gil —r “i 

及 为 它们 的 友 向 通路 ,定义 Ri 。K, 为 如 卡 的 环 状 通 串 ， 
出 发 经 RR 到 ;再 经 R， 辐 到 i， 类 似 地 定义 RR，。 RR 自 (到) 可 
知 浴 环 始 尺 ，- RI 与 沿 环 路 RF 
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Rs 的 转移 概率 的 泌 职 起 相等 的 


( 记 沿 R. 及 沿 民 定 芝 的 号 分 别 为 站 
我 们 由 此 推出 
Wg 1, 
即 吕 5 一 总 和 ,从 和 而 可 知 吕 的 值 不 依赖 通路 的 选取 .下 由 站 的 定 
多 推 昌 天 是 由 产 叭 确定 的 ,下 证 二 可 道 羡 以 天 为 可 逆 平 稳 分 布 . 
由 王 豆 通 性 区 存 企 条 从 了 到 了 的 通路 民 ， 媳 开关 人间 了 
的 直接 通路 为 只 .那么 转移 概率 治 环 路 尺 : 六 的 乘积 为 下 ,出 
(天 ) 得 转移 概 膏 沿 其 反 向 回路 民 ， 玉 的 乘积 也 应 为 正 . 这 说 明 





zi 0 有 取 关 = 一 JI= 那 乞 上 一 人 一 1 夫 而 上 ps, = vp,. 


由 此 Ap 二 Ap 妖 若 思 ,二 日 . 则 ,必须 为 0( 河 为 对 记 , 半 0 用 
同样 的 推 理会 导 禾 p, 半 人 站 ), 所 以 我 们 恒 有 jp, 一 号 ,于 是 
的 可 道 性 得 证 . 

例 3.9 设 . 维 整 税 点 上 随机 徘徊 如 下 ; 





ne 了 一 7 十 1 一 并 
pl 了 一 
Hs j= 1 kk: 
Do 一 4a. T 一 7 一 上 一 1 
ls 一 了 十 1 一 下 十 1 
Hs 7 二 7 1: 一 下 一 1 


1 ， 其 他 . 


! 
- 
了 一 - 一 一 
其 中 > ， Qnm = | Coo Fa. i 二 


mm 


on 于 所 对 应 的 马 氏 链 有 努 验 
证 ( 玉 ) 满足 . 











to Hy 和 
有 i 一 CO:0) 定义 十 vw 一 一 全 pg = a 
i a 
.3 5， 1 
名 .1 di 
gl 1 ,1 - 
[和 a a 区 和 上 归 病 地 念 
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由 i 0 | on! 
mm 一 齐 
人 | [I | 此 1 ! 
于 ™ 之 
: 上 
4 i 1 如 
oo 一 全 二 | ， 
am ' Rp Gn, 
[|] 
1 | 人 上 人 
po | | 
Ve a I | 


由 此 可 知 站 为 叮 道 吾 氏 链 并 以 2 为 可 道 不 变 分 布 . 在 这 个 例 中 求 
个 必 解 方程 ,说 直接 得 到 表达 式 ( 沁 室 上 ,去 解 方 程 1 一 uP 以 求 
得 声 的 计算 起 要 比 上 上述 坟 法 的 计算 好 大 得 多 

3. Gibbs 样本 生成 法 的 进一步 讨论 


C1) 多 峰 分 布 情形 . 
在 Gibbs 样本 生成 过 程 中 , 反 有 当 蔚 氏 链 (Co)} 发 展 的 次 








辕 3 
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数 充 分 大 时 . 台 (o) 的 分 布 才 近似 于 rsx .在 实践 中 攻 
样 才 能 判断 ”是 和 台 己 经 足够 大 了 电 ? 通常 的 判断 标准 似乎 是 看 
& tw) 的 分 布 是 区 比较 稳定 六 . 可 惜 在 事实 上 这 种 判 籽 方法 不 尽 
正确 . 图 4. 1 中 给 出 了 是 上 蜂 的 <fr) 例子 . 

从 < 与 x2s 分 别 出 发 的 两 条 轨道 分 别 稳定 在 ,一 {mis 
Tl 与 上 个 不 辣 的 区 域 . 而 于 实 上 这 时 全 Cw) 
还 远 末 达到 * 迄 太 ” 它 们 分 别 反 映 的 分 布 部 还 不 是 xCzr) . 原 关 在 
天 下 稳 分 布 有 两 个 峰 , 月 在 两 峰 中 间 的 概率 非常 小 .以 致使 得 从 
记 中 出 长 能 和 到达 开 :和 和 共产: 中 出 发 到 达到 | 的 概率 都 极为 微小 ,站 
而 在 - -条 轨道 上 变 从 上, 到 FE; 就 要 化 费 十 分 长 的 时 间 . 在 实践 上 
这 个 达 色 “寻访 "的 充分 大 的 n 在 现实 生活 中 其 至 可 能 不 会 人 帮 有 意 
义 的 时 间 册 达到 , 发 现 与 使 用 Gibbs 样本 生成 法 的 先驱 往往 希望 
通过 选取 多 个 初始 信 , 得 到 多 条 轨道 以 解决 这 一 问题 . 但 是 这 也 不 
能 完全 解决 问题 . 例如 在 前 面 的 例子 中 的 呆 条 轨道 各 由 只 局 限 在 
个 两 的 区 域 £ 与 记 ; 中 ,它们 的 分 布 根本 上 反映 不 出 zx(E) 与 (Es) 
的 比例 . 因而 这 样 合 在 一 起 的 样本 从 大 局 |: -- 般 不 能 期 电 从 它 得 
到 x(r). 

下 面 我 们 提出 一 种 解决 上 述 问 题 的 方法 -一 可 逆 马 氏 链 
Gibbs 样本 生成 法 , 即 通过 可 道 马 氏 链 的 发 展 来 近似 得 钊 遵从 分 
布 rm ye rro) 的 样本 .如果 (py)(p,, = prvy)) 是 -个 可 
逆 咏 氏 链 的 转移 笨 阵 ,那么 

下 (PT = Ay ply,), (3, 35) 

从 可 道 蕊 氏 链 的 特性 就 可 以 解决 上 而 不 能 解决 的 各 个 峰 区 上 
7(*) 的 比例 问题 .下面 我 们 仍 以 双 峰 时 两 条 轨道 的 情形 前 述 确定 
比例 分 配 的 六法. 

没 分 别 在 歼 与 E; 上 的 两 条 轨道 分 别 稳定 在 疡 太 无, 上 的 样 
本 分 布 为 (xz) (rE ED) 及 (r(xr E€ EE,) .由 可 道 马 氏 链 的 性 
夭 , 它 们 所 分 别 代表 的 {Co):n 污 01 限制 在 户 ,与 尼 ， 上 不 恋 分 布 
TT) 与 far 壤 该 分 别 与 fxCr) rE 六 reir 大 成 比 
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倒 , 即 
rr) FT) _1 
A CT) AE) 
于 是 为 了 得 到 分 布 x(，) 的 样本 .只 要 接 (天 7) 一 (7 0 一 1,27) 的 
比例 从 二 述 所 得 的 号 : 中 的 祥 本 抽取 . 也 即 只 须知 道 局. 
确定 0, 的 方法 如 小 : 
对 1 分 别 记 二， 与 EFE;, 
CYCLE MT) Pz Tz) 
CC, MaraIatr) Ml) plrerz)) 


其 中 有 C00 一 1,2) 应 满足 ;对 ¥Y x.yEE,， 
1 = Sn = 3) LD 二 | Bel 





二 常数 局 (VY TE EE) (3.36) 











EF xEE pix,y} plé ! 
TPR ll 
故 0 = |E| sc) | 
™ 
而 EE、 1 证 2 一 (其 中 (和 是 与 的 N 个 独立 模 
pe NE plEt,y) | 四 


拟 样本 》， 
十 式 的 近似 只 需 作 NN 次 -- 步 蕊 氏 链 的 模 氢 , 它 比 切 氏 链 的 分 
布 近 似 于 不 变 分 布 要 求 的 步 数 要 少 得 很 多 . 
余下 的 阿 题 是 从 xtx) 构造 马 氏 链 , 使 它们 以 xtx) 为 可 道 二 
由 第 .二 段 的 讨论 我 们 可 以 构造 蕊 氏 链 (p(x yy)) 以 x(x) 为 
不 变 分 布 . 青 令 
py) 
XLT) 
容易 检查 (PCxr,y)) 也 是 转移 阵 ,而 且 满 足 
NTIplroy) = XtyI p(y), 
即 它 以 x 为 可 道 不 变 分 布 . 可 见 以 (p(x,y)) 为 转移 阵 的 马 氏 链 
就 是 我 们 所要 的 ， 
为 了 使 于 操作 ,我 们 还 希望 ptx,y} 具有 与 (3. 33) 类 俱 的 形 
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户 (sy)》 = 二 | Plzsy) 十 


式 ,期 每 次 只 改 “个 分 址 的 za 个 “转移 概率 "的 村 积 . 为 此 我 们 注 
意 














RIPOVA) OAV ITE ee 
x) 和 HT ) 
RON a Ym 2 (| ?Ya Vm) , A 1 Yn) 


FF rn 
a 1 
Xf 4 MOVs dy TT oY dy 
4 J 


= RON Wa RY | a NV Td 

{3.33 

即 PY? 具有 与 (3.33) 类 假 的 形式 ,与 (3. 33) 不 同姓 只 在 

于 所 有 条 件 分 布 中 的 变量 次 序 倒 了 一 下 . 而 B(x,y) 的 总 思 是 分 

别 以 冯 的 仇 凌 服 (3. 33) 形 式 与 (3. 33) 的 形式 . 所 以 从 模拟 程序 

的 实现 来 者 这 并 林 增 加 多 少 计 算 量 . 其 实 只 增加 了 -- 次 一 进 制 随 
机 选择 ， 

C2) -元 (条 和 件 ) 分 布 的 简单 化 样本 计算 法 . 

以 下 不 妨 假定 该 分 布 上 共有 密度 (在 离散 情形 可 以 完全 类 似 地 
仿 作 )， 

前 面 所 述 的 Gibbs 采样 方法 最 终归 结 为 把 多 元 样本 问题 化 为 
生成 一 元 条 件 分 布 的 样本 问题 . 为 了 得 到 以 FCr) (一 元 分 布 隔 
数 ) 为 分 布 的 样本 前 数 , 只 要 生成 一 组 50,1] 上 ii.4. 的 均 句 分 布 
的 随机 变量 1Z ,23,,…,2。) . 当 FCX) 严格 单调 上 时， 天 Ze， 
"2.)} 就 是 分 布 为 严 (r) 为 i.i. qd. 的 随机 变量 .由 于 在 实际 计 
算 中 通常 都 是 知道 F(x) 的 分 布 密度 (此 密度 - 般 连 续 } ,要 得 到 
”就 需要 一 定 的 计算 量 , 特 别 由 于 在 Gibbs 样本 方法 中 这 种 步 
又 常 需要 重复 成 干 :万 次 ,所 以 简化 一 元 分 布 的 实际 计算 方法 是 
极 有 价 信 的 . 
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下 面 介绍 -种 简单 易 行 的 生成 以 /tz) 为 分 布 密 诬 的 样本 上 的 
三 法 , 称 为 Von Neumann 的 拒 收 原则 (rejection principle , 也 称 
importance sampling). 其 方法 为 ; 

< 把 分 布 各 麻 fCry“ 政 为 "与 它 有 相 问 取 值 范围 人 的 简单 分 
名 密 度 ( 如 指数 分 布 .正和 态 分 布 ,均匀 分 布 或 它们 的 混合 分 
布 at ,只 划 满足 :Ij 使 

Hr Crt g(r)), 

人 2 独 并 地 生成 组 分 布 为 ptr) 汶 桩 本 和 2 1, ,72,) 及 [0,11 
的 均匀 样本 ti! 

3 如果 





[BF 
则 删除 乞 , 余 上 下 的 就 认为 是 -组 以 A(x) 为 分 布 密度 的 样本 ， 
F 商 我 们 证 明 留 下 的 Z, 确实 以 tx) 为 分 布 密度 . 
注意 到 经 过 别 除 后 的 Z. 的 分 布 实际 上 大 如 下 的 条 件 分 布 
PAE gZ) FU) 


_P(Z St,f (2)/g(2) 2U) 
POF) /gr) 7) 





六 ?(U < ) py 





| PIU < Ee S| pede 


eo fe 





利用 0 一 及 | ”ze)ds 一 1 , 便 得 


P(Z rit f(r) /gz)) 一 全 adz = 下 (zr)， 


而 [0,1] 均 匀 随 机 变量 U, 可 以 直接 用 伪 随 视 数 生成 . 指数 分 布 的 
随机 样本 ,正太 分布 的 随机 样本 都 是 易于 得 到 的 . 请 读者 自已 思考 
对 于 正 态 分 布 如 何 简单 地 后 成 样本 . 
(3) 简单 应 用 . 
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四 rT 


,近似 地 求 数 2 ,使 





倒 (x ,XIN lo. 
上 


ross EGG |] 
,| SiR in 全 ,| ve 
(ENE Ne 

证 括 异 凤 的 随机 变量 为 号 ) ,出 Gibbs 样本 生成 法 可 
以 生成 -组 (有 .X) 的 样 林 (区 一 1 ,2.8 天 是 风 
《XXX 的 桩 本 分 布 为 

i) 
这 样 我 们 可 以 慑 
入 Taxi 

这 里 的 思想 是 喜 接 有 儿 样 本 (实际 上 是 附加 样本 ;近似 地 确定 临界 
值 ， 

注 : 运 用 拒 尝 法 瓯 除 保留 一 些 样本 ,有 时 亲 能 圭 风 除 大多 而 在 计算 上 不 
经 济 , 大 科 就 瞧 暴 各 种 改进 ,在 应 用 领域 小 出 现 的 各 种 Monte Carlo 采样 法 ， 
].as Vegas 末 样 法 等 就 应 运 而 生 , 而 有 日 在 不 由 的 实用 领域 各 有 所 长 . 





$83.7 附 录 


1, 本章 中 的 定 文 与 定理 除 特别 者 明 ( 如 定 埋 3.8, 定 理 3.13) 
外 ,一 般 也 都 适用 于 可 数 状 态 的 马 氏 链 , 我 们 只 对 有 限 状态 情形 作 
六 证 明 是 为 广 避 测度 论 等 较为 高 深 的 数学 工具 ,而 突出 该 问题 
与 定理 的 主要 思路 与 应 用 , 对 数学 的 严格 性 有 兴趣 的 读者 可 在 《 随 
机 过 程 论 } 等 类 似 水 平 的 书 中 找到 相应 定理 的 严格 叙 证 . 

2. 引 埋 3. 14 的 证 明 . 


记 
,= {1 2 
于 是 
人 ap 二 Nb 1 (CR). 
£-1 [Cl 
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定义 测度 满足 

便门 一 my HCR\N) = 0, N = ((1,2,.}). 
它 是 有 限 测度 | 因为 > ， 2 < wo1 ,再 令 

blr) = lak) 全 十 1) 全 六 0). 
由 于 志和 C 所 以 声 (x) 一 致 有 界 .这 样 ,上面 的 无 穷 级 数 

ps (8) 一 [odr). 
利用 有 界 收 获 定 理 , 当 = 一 后 时 上 式 右 方 趋 于 
| limw, (rtdr) = y) a limp, 4) 二 人 
本 


圭一 


清 老 也 可 以 利用 数学 分 析 方 法 直接 证 明 引 理 3, 14. 
3， 对 称 马 氏 链 . 转移 阵 了 二 (CP,) 对 应 的 时 齐 可 数 马 外 链 5 称 
为 对 称 的 ,如 果 存 在 一 个 正 数列 {6} (i GE 5) 满足 
此 一 HP, (y i EE 2). 
这 时 {p} 称 为 对 称 化 (或 配 称 ) 数 列 | 这 时 也 可 能 有 > 一 十 cc 


如 果 对 称 化 数列 {&} 还 满足 


Sr < 00， 
那么 对 于 
Ai 会 上 YA， 
我 们 仍 有 
P= & PP,. 


可 见 这 时 {4) 是 了 的 可 北平 稳 分 布 ,因而 马 氏 链 是 可 逆 的 . 于 
是 我 们 看 到 ,对 称 马 氏 链 是 比 可 道 马 氏 链 更 为 广 的 概念 . 一 个 不 可 
约 对 称 马 氏 链 为 可 道 马 氏 链 当 且 仅 当 其 对 称 化 数列 (4) 满足 
2 < co- 而 对 于 有 限 状态 的 马 氏 链 ,可 着 性 与 对 称 性 是 一 样 
和 的 . 
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一 个 以 tu 
性 质 ; 今 
Es ol 
1V Am | 1Y p 
(mn) 和 上 pe P 1 | 
| ft -一 一 
0 2 Vp 
0 
则 
A 全 Var,—., 
Vp 
则 Cx) 是 对 称 阵 . 事实 上 ,利用 对 称 马 代 链 定义 ; 
m= MiP = pr -1 
Vp Mp 
1 1 
一 = -Vp, 一 二 
Vn 万 Vp 
下 面 我 们 进一步 讨论 有 限 状态 的 对 称 马 狼 链 (此 时 一 
逆 马 氏 链 ). 


设 状 态 数 为 N. 那么 对 称 矩阵 x 一 (zw,,) 叮 以 写成 线性 代数 的 


标准 形 , 即 存在 止 奖 矩阵 U, 使 








Ia 0 
T=0i CU Ca 为 全数 ,r = re, 
性 An | 
十 是 
] 1 
天 0 | [三 
A 1 YA 性 | 
PA | |r | : | 
1 | | 
三 一 | 0 an j 
1 人 , 


为 对 称 化 数列 的 对 称 马 氏 链 的 转 称 阵 P 有 以 下 


定 是 本 


六 )， 
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一 





其 中 
Vi 0 | 
Va 
可 了 史 由 居 P 的 特征 值 . 
叉 由 玫 夏 的 对 称 性 ,rr 其 有 六 个 线性 无 关 的 特征 向 量 4，…， 


WU 


下 二 让 所 ， 
可 针对 于 
了 0 
YRl _ 
» 二 一, A 
0 1 
Va | 
有 
Pu Nv, 


也 就 是 P 有 NN 个 线性 无 关 的 特征 向 量 . 现在 设 v 是 其 中 基 --- 个 
v ; 它 对 应 的 多 记 为 A 假定 


了 
RE 


一 


已 一 ， 且 | 只 | 一 max|222 |., 
2 








我 们 不 妨 假定 ww 一 1| 柯 则 用 -2 代替 5| ,于 是 
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MI = aero 一 Sr, 2 





< 3 一 上 





此 外 我 们 显 见 关 一 1 基 书 的 特征 入， 它 共 人 特 征 商 量 1. 这 是 因为 
Pl=1. 

综 上 所 述 . 我 们 有 : 

对 称 怠 开 链 的 转移 洁 阵 P 的 特征 值 部 是 实 的 ,其 纵 对 值 不 赵 
过 1 春生 1- 定 戌 P 的 特征 值 .此 外 PP 其 有 NN 个 线性 无 闫 的 特 
征 向 成 . 市 此 还 可 知 一 上 的 特征 值 都 足 非 正 的 ， 

而 一般 有 限 切 氏 链 的 转 倪 第 阵 了 的 特征 值 动 未 必 全 是 实 的 . 
但 是 燃 似 地 可 证 它们 的 模 仍 不 档 寺 1. 商 且 1 仍然 居 特 征 值 . 特 
别 , 如 果 产 只 有 … 个 互通 类 , 则 有 著名 的 Frobeniue- Perron 定理 ， 
寺 征 值 1 是 单 重 的 . 

用 也 来 闭 定 有限 马 开 链 是 否 叮 道 的 Kolmogorov 茶 件 也 是 可 
数 状态 的 对 称 续 氏 链 的 转移 阵 的 充 要 条 件 . 事实 上 ,Kolmogorov 
原来 的 充 爱 条 件 就 是 刻 丁 可 数 状态 的 马 氏 链 的 对 称 性 的 . 

最 后 ,我 们 举 -个 对 称 而 区 不是 可 道 的 马 氏 链 的 例子 , 亡 就 是 
简单 对 称 随 机 徘徊 . 它 的 对 称 化 数列 是 1. 即 上 兰 1 , 显 见 之 ,一 = 


5 "所 以 它 不 十 林道 平 稳 分 布 . 从 这 个 例子 可 看 到 j 仅 仅 研究 可 浇 
马 氏 链 是 不 够 的 . 
4. 设 ip} 是 有 限 状 念 对称 马 氏 链 的 转 穆 阵 PP 的 对 称 化 数列 ， 




















记 


f(z) 总 ~ TP, 一 人 (fp — pd 7,. 

由 十 jp- jp. 所 以 了 (tr) 是 对 称 二 -次 型 ， 克 为 该 马 氏 链 的 能 朋 
一 次 型 ,也 称 为 地 氏 链 的 Dirichlet 者 , Dirichiet 型 的 概念 可 推广 
到 很 - 般 的 状态 宝 同 {可 数 状 态 空 间 , RR"， 其 至 无 田 维 的 空间 ) 以 
及 时 间 参 数 为 连续 的 博 形 . 由 了 于: 在 那里 的 2 马 氏 过 程 可 能 极为 复杂 ， 
无 法 得 本章 中 邦 样 自 接 去 研究 ,DDirichlet 型 就 成 为 研究 马 氏 过 程 
的 一 个 重要 工具 .近来 Dirichlet 型 与 其 相关 的 马 氏 过 程 书 成 为 蕊 
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氏 过 程 理论 中 的 一 个 极为 重要 的 分 支 . 
习 题 


1 设 18,:n 实 0} 为 Z! 工 对 称 的 简单 随机 徘徊 ,证 明生 部 | :n 宇 
0} 为 时 齐 的 马 氏 链 , 并 求 它 的 转移 阵 . 

2. 误 司 :aa 之 站 为 马 氏 链 , 六 一 (名 -总 ) 求证， 

a) 1 为 怒 慌 链 ; 

by 此 为 切 民 链 , 其 中 号 一 (人 

3. 当 17:2=0, 士 1, 士 2,… 为 独立 同 分布 列 , 旨 


一 1 1 

中 
2 2 

义 设 { 世 ,n 宇 0) 为 从 0 出 发 的 Z' 上 的 对 称 的 简单 随机 徙 箱 , 且 { 忆 } 
与 {加 } 独 立 . 令 





WP 一 





二 一 prs 
称 {&:n 这 1) 为 在 随机 徘徊 中 观察 到 的 随机 场景 . 
a) 求 Et,，; 
b) 证 明 


| 0, mm 为 奇数 
EE 6,,,) 一 一 
[= 经 ， mr 为 个 数 , 旦 癌 - ce 
4. 用 转移 阵 给 出 -- 个 取 整 值 的 时 齐 马 开 链 为 简单 随机 徘徊 的 
充 要 条 件 . 
-一 了 1 
| 1 1 -ea 
2 
同 供 应 出售 并 调价 ,其 在 时 刻 的 价格 总 在 1 元 .2 元 至 5 元 ( 束 
数 ) 按 下 列 方式 译 动 (调价 政策 )， 
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,1 ， 苦 万 ,一 人 
后， eo, 基站 一 (人 一 日 
| 一 ]， 其 万 人 去 昌 
其 中 0D; 分别 为 时 刻 n 时 的 供应 其 与 各 求 匡 ,满足 
jD, 14C— Es 
CC 一 了 -六 
a) 求证 二 是 马 氏 链 ; 
by 计算 “ 步 转移 阵 和 和 丙 步 转移 阵 ， 
cy 计算 不 变 分 布 x 种 平衡 价格 上, . 
5,， 设 水 库 的 储 直 都 是 整 值 的 ,其 最 大 容 鞭 为 (整数 } 吨 ,每 
日 的 进 水 世 是 独立 问 分 布 的 穆 伞 随机 安 量 ( 记 第 日 的 进 水 量 为 
5 呈 ). 又 设 半 CE, 一 不 ) 二 @, 平时 当 水 库 不 空 时 ,每 日 从 坝 释 放水 
I 吨 ( 空 时 不 释放 ), 但 当 水 库 水 想 过 最 太 窑 晤 N 时 ,就 释放 超过 
最 大 容 世 的 部 分 ,求证 在 第 站 大 水 库 中 水 量 总 是 -个 马 氏 链 , 并 
求 基 转 移 阵 及 不 变 分 布 . 
7. 试 证 明 有 限 状 态 马 氏 链 不 可 能 有 人 汶 常 运 状 态 . 
8. 设 面 二 (65.5) 是 从 原点 出 发 的 对 称 二 维 简 单 随机 徘 
筒 . 证 
T inlta:té | 十 | 和 | 一 2)， 
请 直观 地 说 出 二 .的 分 布 (% 宇 0). 
9. 盒 中 有 号 个 次 1 至 刘 的 票 各 - 张 ,每 次 任 取 -- 张 , 记 下 导 
码 后 放 回 , 记 
,二 inftn: 前 # 深 抽 到 的 票 中 恰 有 种 不 同 号 码 14, 一 1)， 
5 一 inffn: 存 第 wn 次 抽取 时 恰好 抽 到 ;号 票 . 
a) 求 了 ,zr 的 分 布 ; 
b) 求 滤 Ii 一 To,Ts- TT 独 阅 ， 
c) 求证 :9 o>0, 使 得 POT > m) 过 eme ， 














d) 求证 POT > mm) = 一 DC = N! 





10, 设 z, 是 非 负 的 独立 同 分 布 随机 变 世 列 , 艾 设 共 分 布 尊 数 
连续 ,定义 记录 {zs1 列 中 最 大 值 出 现 的 随机 时 启 ; Rj 二 1,Riy1 二 inf 
i 这 RT 记 max tro,X， 1)). 求证 {KR} 是 马 开 链 , 求 出 它 的 转 
移 阵 . 又 问 {7 及 (R14) 是否 蕊 氏 链 (TR 1 一 RD)? 

11， 带 叶 码 1 至 六 的 加 个 妹 被 放 在 4,B 两 个 盒 中 ,每 次 等 
概 地 和 随机 选 - :个 苇 码 ,并 与 选号 码 独 立地 以 概率 p 选 盒 4, 以 概率 
4 一 1 一 卢 选 僵 如 ,如 果 选 到 的 号 码 对 庶 的 款 不在 被 选 到 的 盒 内 , 则 
把 此 球 移 到 被 选中 的 盒 中 ,否则 保持 原状 态 不 变 . 记 在 第 ”次 选取 
后 A 中 的 球 数 为 名 ,求证 { 纪 ) 是 马 氏 链 ,并 求 出 它 的 转移 阵 及 不 变 
分 布 . 

12, 入 个 位 置 均匀 放 在 圆周 上 ,- -个 质点 每 隔 单 位 时 间 以 概 
率 羡 道 钟 方向 移动 一 个 位 置 ,以 概率 9 一 1 一 户 顺 钟 方向 移动 一 个 
位 置 , 求 此 马 氏 链 的 转移 阵 及 不 变 分 布 . 

13，Doeblin 独立 耦合 方法 . 

设 PP 为 有 限 状态 空间 位 ,2,…,N} 上 的 转移 答 阵 , 妈 P = 
{pi) ,Pi 2 0, 2 二 了] 夺 ? 寺 和 N, 如 果 它 满足 :了 m,; 使 P= 二 
Co ) 有 p>0, 设 区 为 P 的 不 变 分 布 :XP 二 7 充 看 成 行 间 量 》， 
又 { 扣 17 是 相 所 独立 且 都 以 严 为 转移 阵 的 马 氏 链 , 满 足 妆 一 宛 ， 
为 圭 i 记 随 机 上 时间 T=inf {x 一 了 

a) 证 明 ， 

PE 天 in | Ec 天 入 co 了) 
SE 0 ~ Ne) A minp™), 
POT > pm) & 0 Na), 

了 (< ceo) =1. 

b) 证 明 :(8 ,9.) 是 马 氏 链 , 了 是 它 的 停 时 . 

¢) 证 明 如 下 定义 的 化 ,} 蚌 马 氏 链 , 它 以 PP 为 转移 阵 ,以 为 
不 变 分 布 : 
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[9 A 7; 
6， 有 1 
可) 证 明 |P 一 六 一 了 PC 一 让 | 寺 DOT 2n), 
e) 证 明 CHIC1) ): 
pr — A NOY)». 

这 习题 用 独立 烛台 方法 给 出 了 方 限 马 压 甸 的 钠 过 于 不 蛮 分 布 的 性 奈 
的 证 埋 , 轿 全 方法 ,下 其 是 非 独立 的 粒 侣 六 法, 旭 令 马扎 为 随机 过 程 与 统计 巍 
学 中 的 王权 地 波 ， 

14， 攻 随机 转移 阵 . 

有 限 状 态 的 转移 阵 PP 称 为 驳 随 机 的 ,如 果 它 的 转 置 P' 也 是 
转移 阵 . 对 二 只 有 有 全 不 可 约 互 通 类 的 双 随 机 阵 ,请 求 出 它 的 在 蛮 
分 布 . 

15. 席 王 为 有 限 的 双 随 机 和 阵 ， 则 离散 的 均 邹 分布 是 严 的 配 称 
分 布 当 且 仅 当 P 为 对 称 ， 

16. 对 下 列 PP 指出 哪些 状态 是 常 返 的 和 新 态 的 ;: 


,= 


= (= 
4} Pl pF 《7 一 12 


+ 





by} pr poo (人 

cy Fi = (Op p11 mg 二 lp (OO, 2), 

17. 某 机 器 可 处 于 优良 、- 般 、 待 修 二 种 状态 (分 别 记 成 1.2， 
3). 该 机 器 在 优良 状态 下 停 针 由 时 间 后 就 分 别 以 子 ,十 概率 转 入 
一 般 状 态 和 待 修 状态 ;在 - 般 状 态 工 作 4 时 间 后 就 转 入 得 修 状 
态 ;在 待 修 状 态 修 理 入 时 间 后 就 分 别 以 概率 之 与 二 转 入 优良 状态 
和 一 般 状态 . 求 机 器 分 别处 在 三 种 状态 中 的 时 间 之 比 . 

18. 设 18.} 是 不 可 约 的 非常 返 ( 暂 态 ) 起 氏 链 , 记 

{i,, 一 So， 
求证 ， 加 
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ay Qe, < i 


by Gs 


dy «up 


Th 
d) sup 了 
和 


19. 蜗 蛛 与 蝇 分 别处 于 1.2 两 个 位 癌 之 一 ,如 相 遇 则 捕食 . 设 
蜂 蛛 与 蝇 分 别 按 王 列 转移 规则 独 耻 行动 ; 
i ?| ip' gq 
1 pl ly pg 
试用 一 个 二 状态 与 氏 链 表示 捕食 情况 ,并 求 出 ， 

a) xn 缘 后 恰 与 初 位 置 一 样 的 概率 ; 

b) 平均 捕食 时 间 . 

20, 设 


J 0<pp < p+aq=F+g =1). 


d,=d, >0 Gi 112 n), 


0, 1 一 jj; 
户 ， -jw i 关 J. 
上 


炒 证 严 是 可 送 马 氏 链 的 转移 阵 ,并 求 lim 疡 . 
21. 说 号 是 可 赣 马 氏 链 的 转 称 降 ,其 可 道 不 变 分 布 为 款 , 记 


四 
本 |> 全 和 li 
1 7 


其 他 ， 
LDO, 
证 并 PP 是 可 北 马 氏 链 的 转移 阵 ,并 证 明 它 的 哥 逆 不 变 分 布 x 为 
元 Dp, 
和 Sp 


4 一 1 


li0 





22. 和 证明“: 维 对 称 简 单 随 视 徘徊 是 常 返 的 ,而 二 维 以 上 对 称 
简单 随机 徘徊 着 非常 运 ( 暂 态 ) 的 . 
23，Dobrushine 收缩 不 等 式 . 


i 二 1 设 疡 为 号 长 链 的 转移 
阵 ,e 心 均 为 初 分 布 , 求 证 : 


1 AP- PCCP -vl. 


[1 一 


其 中 
CP) A su Vp pl, 
《 Ssup op pe 
提 坟 :全 2 
0 诬 明 a 1 二 1 72， 
{2】 记 , 明 


Wap a AT 
> 1 和 疡 ， 1 Pu ea 了 一 站- 六 5 
， i 本 Tr 六 adl Er 3 a 


24- 利用 Pobrushine 收缩 不 等 式 证 明 : 苦 有 限 状 态 转移 阵 严 


时 有 
Fa x Ce ™, 


其 中 为 极限 分 布 ,C ,a>0. 


25. 让 明 CiP"t*) 二 FCCP IC Pp"), 技 中 


人 全 ” _ 
CP) A sup 2 py-psl. 


26， 利用 一 个 10,1] 均 与 随机 变 基 w 牛 成 混合 分 布 随 机 数 . 
又 着 分 布 医 数 启 (7) (GN) 严格 递增 , 记 计 0GN) 有 日 


™ 


2 | ,求证 
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> | | To 1) 全 DpF, 
请 用 此 方法 构造 遵从 混合 指数 分 布 随机 数 ， 
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第 由 音 ” 马 氏 链 的 应 用 与 特例 


马 世 链 的 放出 非常 广 证 , 它 污 基 物理 . 牛 物 、 化 学 .神经 网 络 、 
言 筷 .经 济 .金融 等 主 多 领域 , 本 章 中 ,我 们 特 齐 第 二 刘 关 于 马 长 链 
的 基本 概念 与 知识 的 基础 了 上 ,列举 出 马 鲸 链 的 和 驹 种 应 用 模式 ,以 期 
给 访 普 将 杞 氏 链 诡 用 到 自己 相关 领 城 作 - -点 启 反 . 

由 工 实 际 问 是 往往 是 上 分 复杂 的 , 媳 不 对 其 进行 适当 的 简化 ， 
不 仅 可 能 使 问题 因 过 于 复 茶 而 无 法 解决 ,机 昌 也 会 使 主要 矛盾 被 
纷繁 的 枝 节 掩盖 而 难以 理解 .因而 ,在 本 章 中 .我 们 对 许多 实际 问 
题 进行 必 更 的 抽象 和 简化 .以 便于 读者 理解 其 实质 . 于 赵 , 也 就 不 
可 避免 地 会 使 疝 题 可 能 与 实际 有 一 - 定 的 差距 . 在 污 阁 应 用 弓 区 链 
去 解决 实际 问题 时 ,还 需 具 体 问 题 具 体 分 析 , 想 据 实际 情况 坪 变 
通 , 十 活 地 应用 各 种 模型 . 























8 4. 1 Galton-Watson(GW) 简 单 分 支 过 程 


上 概念 与 模型 


本 节 的 数学 机 现 来 源 于 中 于 . 细 胞 或 微生物 等 ( 统 - -简称 为 粒 
了 的 分 型 与 死亡 的 随机 现象 . 这 里 登 一 代 届 蛮 后 的 烷 对 的 总 数 决 
证 一 代 粒 子 的 总 数 的 分 布 ， 

设 冯 4 进 衬 1 是 一 族 相 下 狐 这 同 分 布 取 非 负 束 数值 的 随机 
实 量 . 令 

f= Pt = i) 全 一作,] ,1)， {4.1) 
纪 .表示 第 代 的 第 个 粒子 分 丙 成 的 粒子 数 ' 导 .一 人 0 意味 着 此 粒 
了 死 广 - 于 是 第 n+1 代 的 粒子 总 数 是 
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X, 
Ki = Db C4.2) 
点 =- 1 


设 开 始 尾 一 个 粒子 . 即 夺 , 一 1 于 旦 
PUN 一 TN, 一 Ly 并 | = fo is 一 11) 


人 
一 Pl DS 一 Hs 一 zi 1 = ee == 1 } 
* 


一 Pi vg,, 一 7X, 一 站 有。 一 i 一 i 
由 于 广 ,和 被 46 34) {4 决定 .而 后 者 与 {4: 一 1,2， 
…} 相 互 独立 ,可 见 上 式 


人 DIE, = 用 对 一 
各 -1] 


— Pl Ds. 一 J 


= De,, = jiX, = A po 
其 中 

p= P{ Ne， =j)= P{ 56, 一 省 
与 无关, 因而 (Xin 二 0.1,…) 是 以 ( 才 ,) 为 转移 阵 的 时 齐 马 拭 
- 现在 让 我 们 来 具体 计算 Cp,). 注意 到 人 .ok 一 1,2，… 是 独立 
同 分 布 的 随 宙 变 量 列 ,考虑 终 函 数 ， 


Fr) ~ Si fir. C4. 3) 
由 塞 级 数 的 线 法 规则 我 们 有 
CR) = DY Aionat， 


其 中 
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fe SA Ga. 


层林 为 


这 里 /0 的 概率 意义 是 :C80 十 … 十 和 ,一 2), 事实 上 我 们 可 用 妈 
纳 法 来 说 明 它 
没 中 一 户 ( 和 Ei 十 十 人 一 42), 则 由 独立 性 及 (4. 4) 
PE 二 
一 PC 二 十 十 有 二 有 





一 Ci 十 … 十 E， 一 gkIPCE,,,) = 7 一 皮 ) 


= > ff 
此 外 ,我 们 还 地 接 式 表 出 pp,， 
po fh 六 到 全 (下 (7 
让 二 1， pu -一 从 | 六 已 ) [ 虽 蜀 i 
最 后 这 行 意 昧 善 0 状态 (无 粒子 是 一 个 颇 收 态 , 当 过 程 达 天 如 状 
态 就 不 再 有 粒子 了 ,分裂 也 就 中 止 了 . 


2, 消亡 与 爆炸 的 概率 


设 记 ,为 开始 是 i 个 粒子 最 终 全 部 消亡 的 概率 .其 
Bs = P(r, (wm) < 十 7， 





由 于 各 粒子 之 间 的 分 裂 过 程 是 相互 独立 的 ,所 以 
Do 一 《Bo3 (4,6) 

将 pi 答 单 记 为 2, 则 pw 二 2.. 

现在 我 们 来 分 析 分 别 在 什么 条 件 下 分 别 有 :2 一 1,p 一 0 及 0 之 
p<1, 也 就 是 什么 荣 件 下 粒子 概率 为 1 地 全 死 光 .永远 不 会 死 光 、 
或 既 可 能 死 光 也 可 能 不 死 光 . 

最 简单 的 情况 居 fo==0 与 万 一 1 它们 分 别 是 一 个 粒子 永远 不 死 
与 -个 粒 和 在 下 - -个 时 刻 必 然 死 亡 ; 那么 显然 前 者 永 不 会 证 光 , 后 者 
是 必定 死 光 . 于 是 为 避免 这 种 平凡 的 情况 我 们 设 0 过 ff ,< 过 1. 

下 面 我 们 来 求 p. 我 们 记 平均 一 个 粒子 的 后 代 个 数 为 : 


ps EE, ce 一 万 一 Di, C4.7) 


直观 地 猜想 :pz>1 大 概 不 会 全 死 光 ， | 大 梳 要 全 死 光 ， 
注意 到 利用 金 概 公式 及 (4. 6) 可 推 得 
F 








二 一 一 一 -一 =- 一 一 一 一 一 -一 一 -mm 一 


A 
a:ipg= FIli<l: bin= Fli)>1 


图 4.1 


1l16 





a JF) > ) 


= py +t OPAN = EPAT oA{e) + >) 
上 





十 Ap 一 大 十 ps 


k=] 1 1] 


一 > Frnt Hn = 1) 


上 
一 Dt 一 - 有 区 站 


出 就 是 说 户 应 为 下 面 二 曲 厂 之 安 点 的 横 坐 杯 : 
一 Fir) 1), (4d. 8) 
再 注意 到 > 六 -1 即 户 (1) 二 1, 方 程 (4.8) 水 这 有 一 个 平凡 解 


下 


一 1, 叉 由 于 当 0 时 ;所 (C7) 一 nz 站 0, 而且 


3 一 FC) 一 Yatz -Df OT 1)， 
订 砚 天 tr) 证 增 的 是 函数 , 于是 (4. 8 是 否 在 区 间 (0; 1 中 有 解 ,就 
归结 为 

FO) 1 (Fr) 一 | 
是 正 还 是 负 . 前 者 说明 当 六 0 充分 小 时 .POU 一 ey 一 (一 Ej 站 (1) 
-一 0, 央 而 由 
PFC07 -0 一 大 2 日 
与 连续 范 数 的 中 值 公式 立即 得 到 (4. 8) 在 (0,1}) 中 有 解 , 进 而 出 
Fe) 的 古 性 就 知 谤 04.8) 在 避 0,1) 中 解 唯 --, 我 们 记 它 为 p,. 秀一 - 
方面 ,在 户 () 一 1 和 0( 即 Ai? 时 ,由 天 (人 Cr) 的 凸 性 , 若 关 Cr) 天， 
则 立即 得 到 Fr -+ 之 0CY rE (00,1)). 这 时 只 可 能 有 一 个 解 
p= ]， 
大 便 得 知 ww 一 驯 一 1 .这 意味 着 从 : 个 粒子 出 发 最 次 概 次 沟 上 地 全 
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在 al He 可 能 是 1 或 (4.8) 的 田 - - 解 ED 击 在 我 
们 来 说 明 在 这 个 情况 下 ，- 个 料 子 的 灭绝 概率 一 定 是 点 . 事实 上 ， 
我 们 有 
Dr 一 wy (nn) 一 ii DY fis (hy poetn — 8) = limp.,(n). 


下 面 我 们 归纳 证 有 明 站) 妥 p ,从 而 就 可 得 到 6 一 po 之 ms<1, 即 
2 一 Am 为 此 注意 
Pretl} = fo Oo FO Fp) = po, 
也 就 是 当 2 一 1 时 下 式 成 立 ; 
plotn) ss Po, C4, 9) 
今 设 (4. 3) 对 a 成 并 ,由 下 的 递增 性 我 们 有 
pintn t+ 1)= Dp poln) 一 六 Apsscn 


0 本 = 


一 OACpion)): = FOpotn)) 
生 一 耻 


EF(p0) 一 po. 
由 归纳 法 原理 我 们 就 得 到 (4. 9) 对 一 切 n 汪 1 成 立 . 从 而 
= Ovo, 

可 见 p 只 能 取 值 mm. 

综 上 所 述 ,我 们 有 以 下 定理 ; 

定理 4.1 对 十 -一 个 GW 简单 分 枝 过 程 , 设 -个 粒子 的 裂变 
分 布 为 

Pilote) = R= fi fl = 0,1,). 


令 A Eé(w) 一 kh 则 灭绝 溉 率 ( 设 开始 时 有 :+ 个 料 子 ) 为 ， 


Pa 一 A', 
其 中 
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门 ， 当 产 安 二 


lp.. 2 天 .> |， 


而 当 P2>1 时 产 为 方程 (4. 8} 在 C0,1) 中 的 叭 一 解 . 


[ed 


3. 平均 第 代 的 粒子 个 数 ‘ 规 模 ) 
同人 个 粮 于 出 发 在 第 w 代 时 的 平均 粒子 数 为 : 
中 
将 总 简章 记 为 六 我们 有 以 下 递 推 公式 ， 


Sa = Dhpiatn 十 上 一 Dk ppi(n) 
£-1 = | 3 一 1 
= Dp pe 
3 ,一 1 


大 而 名 一 由 此 可 见 : 
当 gg] 时 ,平均 粒子 数 逐 代 单 调 下 降 趋 于 0; 当 y=] 时 ,各 
代 粒 子平 均 相 同 ; 当 p>1 时 ,平均 粒子 数 按 指 数 阶 途 代 上 升 至 无 


穷 


$4.2 优化 的 模拟 退火 方法 


1 模 氢 退火 方法 的 基本 想法 


优化 问题 都 可 以 归结 为 求 某 泡 数 ( 自 际 函数 在 - - 定 范 于 内 的 
最 小 值 . 但 基 许 多 常用 的 方法 往往 痢 是 运用 某 种 局 部 的 比较 去 决 
定 优 化 过 程 的 发 展 ,以 逐步 达到 最 小 值 . 例如 梯度 下 降 法 ,就 是 每 
次 特 目标 时 数 在 当时 所 考察 的 点 与 此 点 的 邻 域 中 的 点 的 取 值 加 以 
比较 ,梯度 的 方向 正 是 指向 隆 数 值 下 隆 最 快 的 方向 ， 于 是 我 们 就 将 
辩 察 的 点 沿 函 数 下 降 最 快 的 方向 移动 ,希望 经 过 多 次 这 样 的 移动 
而 达到 目标 范 数 最 小 的 点 . 但 这 个 算法 的 实际 结果 是 停 赴 在 梯度 
为 等 的 虚 上 ,这 意味 着 在 算 到 一 个 日 标 孔 数 的 局 部 极 小 值 时 ,也 数 

li9 





在 考察 点 的 值 小 于 它 周围 领域 中 的 所 有 点 的 倩 ,搜索 过 程 就 停止 
六 .我 们 知道 任何 一 个 局 部 极 小 值 点 都 满足 上 述 条 件 , 但 局 部 极 小 
值 的 函数 值 可 能 实际 上 比 丽 数 最 小 值 大 得 才 ,例如 在 图 4. 2 中 从 
3 出 发 为 用 梯度 下 降 法 , 则 搜索 过 程 就 会 停 在 fi ,但 晤 数 在 r 处 
的 值 还 比 最 小 值 大 . 于 是 米 得 最 小 值 的 努力 就 全 窗 托 于 初 值 的 选取 . 


图 4.2 


为 了 克服 上 述 算法 的 这 一 问题 ,Kirkpatrick 等 人 于 1982 年 
( 见 本 章 附录 } 提 出 了 模拟 退火 算法 . 它 的 基本 想法 是 对 原 决 定性 
的 算法 引 人 随 机 噪声 ,使 得 当 现 时 的 考察 点 达到 局 部 极 值 时 ,算法 
过 程 有 - -个 小 概率 “ 逃 出 ”局 部 航 值 的 陷 井 . 更 具体 地 说 是 ;在 自 变 
量 取 离 散 值 (可 列 或 有 限 个 值 ) 时 ,设法 将 原来 算 潜 变 成 随机 的 过 
程 - 一 马 氏 链 ,使 得 这 个 己 氏 链 是 一 个 互通 的 正常 返 非 周期 马 氏 
链 , 而 且 基 不 变 分 布 为 
KB) 一 exp( BO 一 .DA exp( 一 BAG - 1)), 
(4. 10) 
其 中 扰 ，) 昨 我 们 要 优化 的 目标 函数 : 访 二 min 一 般 未 知 , 而 8 
是 -- 个 控制 噪声 水 平 (随机 性 ) 的 参数 4. 10) 式 给 出 的 分 布 很 像 
在 物理 上 的 Boltzmann 分 布 ,其 中 有 是 倒 温 度 , 即 8 一 未 (T 是 绝 
对 温度 ). 若 把 无 噪声 (8-- 十 =) 的 决定 性 算法 看 成 是 绝对 零度 (了 
三 1/8 二 0) 的 情形 , 邦 么 对 AP< 十 co 的 情形 就 是 将 温度 和 开 为 正 温度 


来 进行 搜索 过 程 . 注意 到 在 (4， 10) 式 中 再 令 B= 十 os[ 即 了 ->0)， 
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不 变 分 布 就 伞 部 集中 在 和 六 >) 取 战 小 值 的 点 集 上 了 CC ) 达 最 小 
值 的 点 可 以 不 叭 7. 这 个 过 程 怡 个 先 将 温 庶 出 绝对 稚 度 升 商 ( 荔 
上 席 有 1, 峙 让 温 庆 了 降 思 绝对 堆 度 . 这 -升温 一 -- 降 温 移 过 棵 
像 是 横 氢 "退火 ”的 过 程 .因而 上 广 算 法 区 叫 模 拟 进 火 算 法 . 地 升 沁 
以 得 不 空 分 布 ;再 降温 C8-* 十 3) 使 不 塞 分 布 集 员 于/ 的 最 小 值 
点 集 上 . 
2. 模拟 退火 算法 马 氏 链 的 转 称 阵 与 理论 背 早 

我 们 的 基本 亿 定 是 状态 集 5 为 有 限 集 ,f/ 是 5 到 RI! 的 汞 
数 , 在 前 段 中 我 们 志 经 指出 ,要 给 出 模拟 退火 算法 ,关键 的 : 步 是 
要 求 出 一 族 转 移 阵 {P( 全 一 5 二 DB 十 ec 使 得 (人 4. 10) 中 
的 1 人 3 和 十 尼 0 的 不 变 分 布 . 











例如 我 们 可 以 取 
[exPpf 一 《FT — FODNA 2Z, tj 
ll - 2 p(B), f= 


(4. 11》 
其 中 了 址 一 个 充分 大 的 常数 ,满足 户 (8)<1， 
例如 可 有 了 一 、)[I Aexp(C- CD) 7 或 (全 体 装 
态 数 }N. - 
在 (4. 117) 中 出 现 的 1 完全 起 技术 性 的 , 它 可 以 使 2 的 计算 村 
不 至 于 太 大 .但 是 当 状 态 集 5 很 大 时 ,以 下 的 取 法 在 计算 时 实际 
| 是 不 能 实现 的 ,于 是 我 们 可 用 如 下 的 POR): 
(Cutl A expl— (f(D — FO /Z, 7 Fj 
PP) 一 1 
|1 ~ Da), ;一下 


其 中 (co 古 个 尽 续 稀 蚊 的 互通 转移 阵 , 这 时 艺 例 如 可 下 





Z= SGA A expl— fF 一 AD 《4 13) 
在 5 幢 4- 维 格 点 中 的 有 限 区 域 时 ,(G) 例 如 可 以 取 为 ; 
GT /在 i 的 邻 域 R, 中 ; 
0， 其 他 ， 
其 中 jR,| 表 未 R, 中 的 点 数 . 这 时 8= 十 就 是 从 i 出 发 以 相间 的 


概率 向 比值 小 的 邻 域 中 的 点 下 , 入 如 记 
一 人 和 及 iFi 一 min/ (7) 或 FD > fi }, 





(4. 14) 





并 令 
1 二 
TT 本 
G,, = | 15, | jE (4. 15) 
‘D0, 其 他 ， 


如 果 (c)? 还 能 保持 互通 , 则 这 样 取 如, 在 事 宰 上 可 以 加 快 计算 . 这 
时 当 8= 十 ce 时 它 就 是 决定 性 优化 的 最 速 下 降 法 . 于 是 这 时 所 得 
的 马 氏 链 CP68) ) 可 以 看 成 最 速 下 降 法 的 随机 摄 动 . 
由 于 (G6 互通 及 1 Aexp(--(f( 站 一 100) 让 之 0, 可 纲 PP(B) 
是 互通 的 , 又 由 于 对 了 的 严格 最 小 点 六 有 
dm plB) ~ lim (1 一 pCP)) 


[ti 


Hl 


im (1 — DG A exp(— 0O) — G0)8)Y/2) 
人 HE 


= 1 《 国 AD) > ff00). 
可 见 充分 大 时 i。 非 周期 ,因而 PCB) 非 周期 , 记 名 ~ {62(w) :mn 
0} 为 由 C4. 12) 所 定 久 的 PC8) 相 对 应 的 马 氏 链 , 我 们 证 明 当 (0) 
对 称 时 (例如 (4.14) 中 的 Gi) 它 是 以 (4.10) 为 可 道 不 变 分 布 的 可 
逆 马 氏 链 . 我 们 注意 当 (之 /Ci) 时 有 (不 计 常 数 因子 ， 
HB pAB) =e Hn RG en ney fF 
一 Cone Wd 
= pp). 
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闻 样 此 等 式 在 /站 这 fA) 时 出 应 成 立 , 这 就 还 明了 我 们 的 汤 言 . 
由 下 (2 的 不 可 约 性 ,利用 转移 第 隆 的 极限 性 质 我 们 丰 有 
Pi to) — = PO 2 BY G1-* rm). 
人 minf 7 二 是 
tim limP, (wt {tw EC) 一 1， 
可 见 对 充 分 大 的 8. 时 间 害 分 长 后 , 马 氏 链 儿 乎 总 在 /(。) 最 小 什 
亏 集 中 ， 


3. 具体 算法 的 说 明 


在 县 体 计 算 时 我 们 有 疝 种 算法 : 

a) 了 时 齐 马 色 链 的 模 氢 进 火 算法 . 首先 任 给 初 值 > 及 {8B,), 先 
对 癌 作 弓 氏 链 的 随机 寞 氢 : 由 出 发 (全 =) 按 1P08Di7ES) 
为 分 布 生 成 -个 随 机 变 扫 的 祥 本 与 (ao ,再 由 {ps 08.)j 生 成 一 
个 随机 变量 所 的 伴 本 名 (wo ,… 重 复 此 算法 充分 多 次 ,十 是 名 个 入 
人 Cw) 的 分 布 就 近 二 p(B.)j ;再 过 个 对 PB,, 重复 此 步骤 得 到 相应 的 
ee oa) 二 是 这 时 


工 1， (SY) BY 十- 


如 po 
当 w 很 大 时 . 除 5. 中 状态 外 .其 他 各 状态 几乎 绝 少 出 现 , 而 ss 中 
的 状态 频繁 出 现 . 
pb)》 为 了 了 加快 计算 ,在 实际 算 时 我 们 常用 非 时 齐 的 乌 厂 链 , 也 
就 是 构造 第 ww 步 的 转移 概率 是 P43,,) 的 非 时 齐 蕊 氏 链 名 的 轨道 ， 
但 是 使 8 慢 慢 地 欧 上 十, 例如 使 品 -> 慢 于 logz, 邵 ， 
如 


logn ~ 





Ch ee) 
可 以 在 理论 寺 证 明 
PG) E SI Cn ), 
于 是 对 甸 固 定 ,样本 1,Cw) :之 0} 相 充分 大 时 的 取 值 就 可 以 认 
为 是 A。 ) 的 最 小 值 点 . 
123 





-在 用 (4.11) 或 (4.12) 来 算 208) 及 它 所 生成 的 马 氏 链 的 
祥 本 问 的 转移 (为 从 转移 为 和) 时 可 应 用 Gibbs 样本 生成 法 , 特 
别 地 ,此 时 还 可 以 避免 计算 Z. 只 释 用 叮 道 性 估 出 0.( 参 见 (3. 36)) 
骨 可 ， 

d) 模拟 退火 的 计算 方法 在 许多 改进 与 变通 ,到 今 人 不失为 一 
个 研究 课题 . 我 们 在 本 节 中 只 是 对 其 基本 方法 与 思想 作 了 简单 的 
介绍 .希望 进一步 学 习 的 丐 者 可 参考 以 下 著作 及 其 中 所 绪 文 献 

[1 P.J. NM Van Taarhouen & FE. H.L. Aarts;Simulated An- 
nealing: Theory and Application ,1987 ,DD, Reidel Publishing Com- 
pany( 本 作 算 法 与 应 用 方面 的 参考 ). 

[21 Hwang,C.-R. & Sheu,S, -1. :Large time behavior of 
perturbed diffusion Markov process with application to the sec- 
ond cigenvalue problem for Forkker ~ Plank opPeratoars and Simu- 
lated annealing. Acta Appl. Math. n,，1990( 可 作 理 论 方面 的 参 
考 )， 


4.3 人 口 结构 变化 的 马 氏 链 神 型 


1. 模型 


在 研究 社会 的 经 济 , 消 费 ,教育 .就 业 等 许多 问题 时 ,我 们 常 党 
会 过 到 某 种 分 类 结构 的 变化 分 析 . 例如 考虑 社会 的 教育 水 平 与 广 
化 程度 的 发 展 变化 ,我 们 可 以 建立 以 下 的 模型 ,首先 ,我 们 将 某 地 
整个 16 岁 以 上 的 入口 分 为 : 文 计 初 小 .小 学 、 初 中. 高中、 大专 .大 
学 .中 级 技术 或 专门 人 才 、 高 级 技术 与 专门 人 才 、 特 级 专家 等 10 
级 . 结构 的 变化 分 为 升 过 或 退化 (如 初 小 文化 音 久 不 接触 又 变 成 广 
育 ? 和 进入 与 退出 (年 龄 达到 16 岁 或 死亡 或 迁 入 迁 出 两 种 原因 
若 用 (mn (4) ,no(2),… nolt)) 表 示 在 :年 各 等 级 的 人 数 ， CE = 
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Sha 就 是 总 人 数 . 若 记 9 为 每 年 从 第 ;级 转 为 第 /级 的 人 数 
1 
在 ?组 总 人 数 中 的 百分比 , 则 
和 一 【in 
哎 是 - -个 淮 转 移 隆 ( 邮 鲜 行 加 起 来 不 大 十 二 卫 不 一定 竺 二 
另外 我 们 考 碟 进入 与 返 币 :ibm 为 每 年 从 第 ,级 和 的 比 
例 ,i 记 7 为 每年 记 入 :级 的 大 数 在 章 进 入 大 数 中 的 比例 .二 是 





四 11 
人 C1. 16) 


艾 若 记 RR 为 总 注入 人 数 ,IV) 为 总 池 ! 出 人 数 . 于 二 
NOFI NOD RD 了 rn， (4. 17) 





nttd+ 1) -AN Pr 


1 


MD NGEd Do— NG RO) Woy (4.18) 
车 总 人 数 以 带 数 并 分 比 a 增 长 (a 为 负 时 是 减少 ), 即 








MU) -- aN (t+ 1), aa 一] 一 站 
于 是 
ED NG V0) RO) 
NETD NGrDo No Ne) 
i VY et) MU) | WE) 
rr 
记 a Ne 了 上 起 就 改写 头 
a tt 上 13 -= | Na, 十 ro) 十 ] 2 -| (1 -- a). 
| a 


特别 当 总 大 数 不 变 时 ( 即 a 一 0 时 ) 就 有 


oo Pat, + rg, ). 
r-l 





再 沁 
A(t) = (a sat)). p, = gr P= (pi) 
那么 二 式 变 为 
af 十 1) = 4 (4.19) 
这 与 以 了 二 (pi 为 转移 阵 的 Markov 链 的 Master 方程 
w+) = Dp, 
是 一 样 的 (参见 8 3.1 第 二 段 )。 
2. 稳定 的 分 布 结构 
在 许多 问题 中 ,我 们 希望 一 个 系统 能 保持 -一 个 稳定 的 分 布 结 
构 . 从 马 氏 链 的 不 变 分 布 的 知识 ,我 们 知道 若是 的 不 变 分 布 ， 
那么 
4 = aP, 
即 从 a 出 发 按 上 面 得 到 的 分 布 的 变化 规律 为 : 
at0) = 2, a(lf) =u 
这 就 称 4 是 一 个 稳定 的 分 布 结构 ， 
注意 到 稳定 分 布 是 依赖 于 进入 各 级 的 比例 向 量 > 的 (> 各 (ri， 
ro 例如 当 








1 -a pb Q 
1 a bb, 0 
人 多 二 ， 
0 1—as bs 
0 0 1 一 a 
?9 toe = ein 
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f 

| | 
上 时, 营 ?， -st00.- ,1 )。 由 et caer .此 中 心计 久 的 前 9 到 .而 
1 


1 | 
当 ， 一 (10 0)B 寺 ,有 
T 国 0 
a -a b, 总 
uf p 1 a b 
Pe | 
! 
| 。 
wie, -Bb, 1 -a bb, 
du | 1 - Ct 








于 是 “< 一 2 的 解 是 
2 
1 1 


人 二 一 了 3 bl 
~ by cud Ward 


其 中 3 和 2 二 


又 例如 某 地 区 入口 的 雹 教育 水 准 , 规 定 滑 入 人 口 的 文化 程 让 
必须 高 于 大 芯 , 这 时 有 天 二 00G 委 5)， 

在 许多 实际 问题 中 ,往往 "会 人 re) 前面 模型 中 辐 一 
10) 是 可 以 选择 的 . 于 是 ,问题 就 是 在 于 找 出 了 使 得 它 对 训 的 不 蛮 
分 布 (稳定 结构 ) 比 较 “ 合 理 *( 或 好 ). 

例如 对 人 口 的 年 龄 结构 ,往往 希望 中 年 人 多 些 . 又 例如 对 人 口 
文化 水 平 结 构 当 然 希 望 文言 越 少 越 好 ,而 专家 并 不 需 太 多 . 于 是 
根据 实际 向 题 ,我 们 往 御 可 选择 . -个 合理 的 稳定 结构 a. 阁 且 从 
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现在 的 分 布 结构 et(0) 出 发 ,让 “依赖 于 + 希望 逐步 调控 (2) 而 尽 
快运 到 4 7 为 此 我 们 在 这 里 讨论 - -下 在 + 不 依 :时 全 部 可 能 的 (不 
同 的 * 下 ;的 八 定 分 布 结构 . 事实 上 由 于 &=eP，, 邯 
a a wr) 二 

其 中 Go vines) r 一 (rrarsro) .那么 , 当 aro 天 0 
上 时， 

7 uti — Qaw’, (4. 20) 
即 a 一 aw'r(7- Q@) 1. 义 因 为 要 求 v 闫 0, 所 以 a 之 eautY 刀 ， 
这 样 ,对 于 Ye Ex 会 aia 写 Yagofy 四} 就 可 以 由 (4 20) 
找 出 , 它 就 满足 

¢ ~ aQ + sw'r ~ ef, 

所 以 对 于 这 个 + ,a 是 一 个 稳定 结构 分 布 . 可 见 “ 合 理 * 的 稳定 分 布 
必须 在 .ae 中 ， 


$ 4.4 统计 力学 中 的 几 个 常见 马 氏 链 模型 


1. 神经 网 络 的 Hopfield 异步 动力 学 模型 


神经 网 络 是 … 个 由 N 个 神经 元 彼此 有 相互 作用 而 联结 在 - 
起 的 一 个 体系 . 作为 神经 网 络 的 整个 体系 协 问 工作 ,共同 产生 一 个 
总 的 效应 , 我 们 这 里 考虑 一 种 最 简单 的 神经 网 络 , 它 是 近年 来 提出 
的 记忆 模型 ---- 联 想 记 忆 的 上 典型 . 

设 每 个 神经 元 可 以 取 一 1 与 十 1 两 个 状态 ,其 中 一 1 代表 该 神 
经 元 处 于 揣 制 态 ,十 1 代表 该 神经 元 处 于 激发 态 . 于 是 N 个 神经 
元 的 整体 可 以 处 于 2* 个 不 同 的 状态 ,将 其 全 体 记 为 
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XN 
我 们 来 纵 出 这 种 简单 神经 网 络 的 运动 . 当 系 统 处 上 类 在 
fi 网络 中 第 了 个 神经 元 处 于 激发 态 时 .1 一 
一 1 . 则 它 奸 于 第 ,个 神经 元 有 相生 作用 能 下 ， 旭 呆 它 处 于 抑制 状 
态 二, 一 1 则 它 村 第 i 个 神经 元 有 相生 作用 能 一 页 , ,二 神经 元 J 
对 ;的 作用 是 Wi. 于 是 整个 网 络 对 神经 元 的 总 相互 作用 是 


Sp (WW). 


让 这 种 相生 作用 下 . 设 网 络 接 如 下 境 则 运动 : 兽 -- 步 随机 地 选 一 个 
神经 元 ( 芭 每 个 神经 元 以 17N 的 机 会 被 选中 ? ,然后 在 系统 对 此 神 
经 无 ( 谈 为 第 六 个) 的 总 相 旦 作用 是 耕 由 过 -一个 阐 值 8; 共 超 过 忆 
则 此 小 结束 时 该 神经 元 处 于 注 发 状态 .和 否则 它 处 十 抑制 态 , 由 于 当 
系统 在 现在 的 状态 给 定 的 条 件 下 ,选中 哪个 神经 元 以 及 此 神经 下 
仕 下 一步 玻 什么 状态 都 与 系统 的 过 去 历史 无 美 .所 以 兰 记 第 n 步 
结束 时 系统 所 处 状态 为 总 , 则 舍 :=0,1,2， ;是 一 个 取 值 二 六 
的 上 钾 生 转移 隆 记 为 P= (Pp, .7syEX, 直 中 
,人 PE = p87 — 7) 





1 
Ar yy 
一 40， 天 的 其 他 傅 沈 ; (4. 21) 


| Dp y= 
其 中 


ro . 、 , 
rs 


区 一 sgnl 人 Hi 一 | | 设 NW 一 如 全 不 为 0)， 
下 面 我 们 记 





本 一 】] 
例 41 少 六 一 4， 
1 一 1 1 1 
- 1 一 ] 一 ] 
CW,,) 一 1 ] 1 
1 一 1 1 1 


(4d. 22) 





. -ii 1 
有 1 2” 2 2 四 


为 符号 简单 起 见 ,我 们 用 去 Cz 十 1) 所 代表 的 二 进 制 数 的 十 进 
制 数 表示 作为 z 的 记号 (从 zx 变 成 款 (z 十 1) 即 将 所 有 上 一 一 1 的 zx， 


改 为 工 二 0， 也 就 是 ( 1， 1; 1， -1)=—=0,( 1;—1,—1,1}= 
14,(1,1,1,1)= 二 15. 我 们 可 从 计算 得 到 下 天 : 





TT 0 1 2 3 436 7 8 9 1011 1213 14 15 
sg8nA -一 十 一 一 一 一 一 十 十 十 一 一 一 十 
SET 上 十 -一 一 十 十 十 一 一 一 -一 十 -- 一 一 
sgnA -二 十 -一 一 二 十 十 二 十 一 十 二 十 
sgnh 一 十 十 十 一 一 一 二 十 十 二 十 一 二 二 十 


注 : 上 天 中 “二 "代表 “1"," 一 "代表 "一 1 


于 是 我 们 可 以 求 出 16x16 转移 概率 阵 , 例 如 我 们 有 


这 是 闫 为 从 状态 0 二 (一 1, 一 1, 一 1, 一 1) 出 发 第 一 步 能 选 1,2,3,4 

四 个 神经 元 之 --, 而 量 是 等 概率 的 ,如 选中 神经 元 1,3 或 4 则 由 于 

它们 原来 处 于 0, 是 抽 制 态 , 由 上 党 中 状态 6 下方 的 -- 列 可 知 第 一 

步 后 的 结果 仍 为 抑制 态 ( 等 于 一 1), 所 以 系统 此 时 还 未 变化 , 即 

Ps 一 二 ;只 有 选中 神经 元 2 了 时 ,这 时 的 状态 由 0= (一 1,--1, 一 1， 
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太一 (一 1,.1. 一 1， D. 从 而 志 ., 一 地、 义 如 


1 _1 
Plt 一 十， Fs 一 4 Pi.: 
1 1 
Pris = A Pnl, = 4 a 
下 面 我 们 算出 了 这 个 转移 阵 的 全 部 分 量 : 产 一 
tl 1 2 3 1 5 6 站 品 9 lt 
全 1 门 Lr 站 由 站 站 0 六 
] 二 0 | nn 0 oa 
2 器 由 工 二 性 总 器 0 已 六 n 
、 
3 0 9 i | 人 站 三 0D 
i 和 上 1 站 图 让 
5 性 总 总 中 二 了 总 全 G 由 站 
总 0 中 nD | 二 与 3 u 站 石 0 
全 | 3 
了 总 0 0 a 站 站 on [WW 站 
4 
| 1 i 
总 总 n [ou n 0 0 0 一 一 一 
卫 4 4 1 
9 a 0 0 0 0 0 0 六 站 
i} 0 n [0 a 在 0 0 a 站 a 二 
11 [0 | 站 0 总 0 0 0 全 nn 已 
12 0 总 0 心 + 0 0 由 a 和 
13 vy [0 站 总 全 -上 a 站 ] 有 
1 dy 一 
1 4 
1 0 0 0 0 000o oo 1 
4 4 


心 


一 | 一 





12 


总 


[0 


0 


总 





六 的 转移 阵 情况 让 网 图 4. 3. 在 图 中 我 们 可 以 看 到 ,状态 4 与 
1 是 两 个 常 返 状态 ,它们 各 组 成 一 个 常 返 英 . 且 (11) 估 1.247.3， 
8140.4151 基 坟 概 率 为 1 可 达 11 的 非常 返 状 态 : 而 (4) 会 10,5,6， 
12 中 的 状态 号 以 概 卓 为 1 地 可 达 状 态 4 的 非常 返 状 态 , 而 非常 返 
状态 8.13.14 分 别 痢 巧 能 以 下 概率 可 达 装 态 4 与 11 的 非常 返 状 
在, 状态 上 与 11 分 别 为 两 个 当 返 状态 类 ,都 是 由 -个 常 返 状 态 组 
成 的 一 个 常 返 类 . 图 中 可 电 粗 黑 线 联结 的 箭头 联通 的 到 4 与 11 的 
状态 分 别 是 以 稳 率 为 1 可 达 4 与 11 的 状态， 





上 面 这 样 :个 马 氏 链 ,可 以 作为 联想 记忆 系统 的 - -个 * 玩 具 神 
型 ”这 个 系统 有 两 个 记忆 : 即 状态 4 与 状态 11. BC11) 与 下 (4) 中 
的 状态 分 别 可 以 看 成 是 状态 11 与 4 的 部 分 信息 . 这 个 神经 网 络 系 
统 记 住 了 4=C-1,1, 一 1,--]) 与 11 一 (1， -1,4,1) 这 两 个 状态 , 
同 忆 的 过 程 就 是 从 部 分 信息 出 发 ,最 终 到 它 的 完全 信息 --- 系统 
记 住 的 信息 (11. 一 1, 一 1 或 (1 ,一 1,1.1). 在 这 个 模型 下 记忆 
(或 称 学 习 ) 的 过 程 是 如 找 神经 了 网络 的 菜 个 适当 的 相互 作用 .以 保 
证 所 要 记忆 的 信息 (如 4 和 11) 为 其 常 返 类 中 的 那些 状态 . 回 亿 
(或 称 恢复 ) 所 记 信息 的 过 程 就 是 从 此 信息 的 部 分 信息 ( 即 上 面倒 
关中 的 341D 有) 中 的 状态 ?出 发 ,让 系统 在 规定 的 相互 作用 
于 发 展 ( 即 证 马 氏 链 随 ， 发 展 )， 当 充分 大 就 达到 要 回忆 的 入 喜 . 
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上 面 讲 的 记忆 方式 一 一 联 窟 记忆 与 传统 的 记忆 方式 不 同 , 在 
传统 的 记忆 方式 (如 记事 本 、 厂 带 . 醚 盘 等 )j 记 和 人 与 恢复 中 鸭 关 
键 屁 要 有 - -个 索引 , 它 指示 信息 量 怎 样 记 东 在 系统 中 的 ,本 焦 复 的 
过 程 必 人 顷 在 这 个 索引 的 指导 十 去 找 出 所 要 的 信息 . 但 是 这 一 种 记 
把 的 模式 与 大 脑 的 记忆 方式 天 截然 不 同 的 ,在 大 脑 的 记忆 中 并 不 
存在 什么 “索引”, 而 与 之 相 比 ,联想 记忆 模式 就 显得 更 为 接近 大 脑 
的 记忆 和 模式. 所 以 它 是 目前 被 入 们 普遍 认为 研究 上 大脑 的 上 作 原 理 
与 一 能 的 一 个 较 好 的 模型 . 


2, 神经 网 络 的 同步 动力 学 随机 模型 (recurrent network} 


神经 阅 络 的 同步 动力 党 随机 模型 与 1 中 讲 的 Hopfield 异步 
寞 型 很 类 伏 , 但 有 两 点 不 同 : 

1) 在 间 步 模型 中 不 限制 每 步 只 改变 一 个 神经 元 ; 

22 这 里 神经 网 络 的 作用 并 不 完全 决定 神经 网 络 的 运动 ,而 只 
决定 它 运 动 的 概率 分 布 . 也 就 是 说 ,这 里 不 再 随机 地 选取 一 个 神经 
元 作 运动 ,而 基 计 各 个 神经 元 同时 作 随 机 运动 , 具体 地 说 ,省 系统 
处 于 状态 -= (alarmyrw) 时 ,我 们 设 

站 0 全) 一) 








= Ir 1 
一 lI 一 {4,23) 
| 1 十 exp| | DW Oy,) 
| 这 里 ,我 们 嗓 设 hr)= DW 0 恒 不 为 0] ,其 中 是 倒 温 
度 参 数 :8 二 页 . 当 绝 对 零度 ( 即 8 二 -4 ) 时 


1, Y= ys 
Pst oy = 一 -~ 


‘DO, 其 他 ， 
其 中 
YT CD) yy (2)), Vr) 一 sgnh, ty， 
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音 轧 是 当 与 玉 (z) 全 部 问号 时 有 (有 (8) 二 3) (6 一 了 并 ) 


二 1. 队 而 当 六 很 太 但 有 限时 ， 
11 y ~ yr)} 


P,...8) ~1 7 
上 D， 其 他 . 
例 4.2 相 碟 作用 同 例 4.1. 由 (4.22) 给 出 ,这 时 了 {十 0) 由 
> 一 202) 按 (4.23) 决 定 , 而 yz 由 下 表 给 出 (sgnpa.(r) 的 计算 结果 


釜 饥 例 4. 1 表 ): 
了 了 昌 9 0 1 12 1}3 14 18 

















Yr 4 5333141443311 1 11 4 3 3 11 


ol , 了 
OA 0- 
DW wm 8 


这 个 神经 网 络 的 动力 学 的 转移 状况 参见 图 4. 4. 这 时 系统 记 住 的 
状态 (党 返 态 ?仍然 是 4 与 11 两 个 状态 ,但是 它们 的 部 分 信息 与 例 
4. 1 中 的 动力 学 咯 有 不 局 . 读者 可 能 已 经 注意 到 了 己 ( 十 c) 转 移 
实际 上 都 是 以 慑 率 为 1 地 转移 , 所 以 不 妨 可 理解 为 ;这 时 相互 作用 
对 有 = 十 co 所 决定 的 动力 学 是 -个 决定 性 的 动力 学 , 而 8 一 十 ce 
的 情形 是 f= 十 人 情形 的 随机 摄 动 , 当 户 充分 大 时 ,{E} 以 很 大 的 
福 率 按 决定 性 的 方式 转移 ,但 是 此 时 从 状态 4 也 可 达 11, 因 为 这 
个 马 开 链 是 一 个 互通 的 常 返 马 氏 链 ,这 样 我 们 就 不 能 用 常 返 鼎 通 
类 来 认识 系统 记 仁 的 信息 .注意 到 对 于 这 个 马 氏 链 , 当 8 充分 大 ， 
经 两 步 以 后 ,在 ?不 是 十 分 大 时 ,如 果 从 BCODAf1,2,3,7,.8,9， 
0 113;14,15} 出 发 ,6 以 大 概率 停 在 11; 如 果 它 从 五 (4 全 10， 
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5:6112}) 出 发 ,& 以 大 摄 率 停 在 4. 而 另 :方面 ,由 马 氏 链 的 理论 可 
以 知道 , 当 7 欧 于 无 窃 时 ,&, 将 跑 遍 全 部 状态 ， 

下 面 我 们 来 证 明了 Pt) 是 可 道 的 ,并 求 出 其 可 道 不 变 分 布 ,为 
简单 起 见 设 各 一 0， 名 关 0 的 情况 可 类 似 地 证 明 . 

由 于 w 与 w 只 能 取 一 1 或 1 ,我们 有 


PC) 上 +exp(C Ph,Cry,) 
PC 、 
] 1 expt- Be 

















上 exp( 十 Bh Cr)y, [| Cexpt Bh cr)y/2) 
a 


Sr 





| Cexpe— Bh, Cryy,/2) 


exph | 有 z} oz21 





expl 2 Sh C7) 72 








可 见 
’ 1 
, exp| 3 hy | 
z= CO—- Fe 而 (4. 24) 
其 中 
和 78) = 二 exp| Shy). 《4. 25) 


另 一 方面 ， 由 于 本 .一 全 
Dih, Cr 二 DW ry, 一 DSW,y, 


= OW yz, = Dh 
因而 
Zr,.,(B) = exp| § Dh ca)y, | 


135 





一 exp| 全 Dh) |= ZB Ps B). (4.26) 


十 奸 可逆 不 但 分 布 便 古 
一 一 地 一 -. 《4. 27) 
共 中 
A 7 bras 
我 们 还 时 以 大公 
| B 信人 Cy | 





lim ea{) = na - 
yu - 


人 ~ DLs 已 之 人 Cry | 


上 式 右 映 极限 号 ro Ih.(z)1| ,而 分 多 的 
凸 部 是 exp| 与 Srmax 5) Ta, Cr) 中 .人 
及 一 (y: 3 | 天 (31 一 max 2 h(x)}, 


则 
lim OF) 二 1， lim A = 0. 


可 见 不 变 分 布 全 部 集中 在 pz) 取 最 大 值 的 状态 . 全 

但 是 当 六 有 限时 ,从 记忆 模式 的 观点 来 看 P08) 与 它 对 应 的 马 
示 链 当 n>o% 时 就 不 会 理 了 ;这 时 无 论 从 什么 分 布 出 发 最 终 的 分 
布 都 是 -一 样 的 . 这 上 就 意味 着 无 论 从 什么 初始 的 部 份 信息 出 发 ,最 终 
我 们 以 同样 的 概率 得 到 各 个 记忆 信息 一 - 这 样 的 记忆 系统 就 成 了 
“日 痴 "! 事实 上 ,只 有 在 时 间 不 长 的 时 候 ,我 们 以 大 概率 达到 的 状 
态 才 是 对 应 于 初始 部 分 信息 的 完全 信息 .但 是 什么 叫 时 间 不 长 ? 系 
统 皇 样 来 以 制 ?这 里 存在 着 严重 的 问题 ,解决 这 些 问 题 的 一 种 办 法 
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赵 让 六 依 天 .并 控制 六 的 变化 .但 是 这 些 讨 论 已 超出 了 本 书 的 


范围 , 读 攻 可 估 努 : 
LTD. Amit Modeling Brian Function. Cambridge Uni- 


versity Dress，1989. 
[2| Albeverio, MP Qian &.Feng The role of notse tm neu- 
ral nctworks, Physical Review E. Vol, 52, No,6, 8593 --6606， 


3. Bnltzmann 机 


在 肺 面 问 步 动 力学 网 络 中 再 加 进 输入 神经 元 与 输出 神经 元 ， 
就 得 到 种 更 为 广泛 的 神经 网 络 机 型 , 称 为 Bolizmann 机 ( 见 图 )，; 


输出 神 绊 元 
输入 栅 铝 志 pl ”al 





输入 神经 元 的 状态 由 每 个 时 刻 的 瞬间 输入 决定 ， 而 输出 神经 
无 是 可 观测 的 . 阁 以 TG Ck 所 5) AL() OD Cr 渤 n) 分 世 
记 输 入 神经 元 、 隐 神经 元 与 输出 神经 元 在 时 刻 ;的 值 . [4) 的 信和 出 
那 时 输入 决定 ,而 h(t 十 1,0,4t 十 1 的 值 由 下 列 转 移 概 来 分 别 决 


定 ; 


用 《1 十 exp 一 TCD ROO ORG 二 1)) 1 
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< 1E (1 从 exPp (CO— BH CT OD REY ODO 人 十 123 
=| 


其 中 Gm CO OO )) 

H(i, hh.0)— PW 十 2 WEAht+ wo.. 
容易 看 出 如 果 7 了 4) 是 -个 Markov 过 程 , 那 么 (TCD RD OK) 
也 是 一 个 Markovw 过 程 . 

这 种 网 络 比 同步 网 络 吏 广 . 因 之 也 更 适合 于 复杂 问题 的 模式 
识别 . 但 是 这 种 网 络 的 学 习 ( 学 习 意 即 : 由 样品 的 实测 值 来 估计 相 
开 作 用 系数 5 ,WWDG 和 mn 十 nn 各 5 各,71)) 是 一 
个 很 复杂 的 问题 .计算 基 很 大 ,然而 效果 比较 好 ,而 且 很 稳健 (Ro- 
bust) {参见 [Azj). 

办 外 还 有 一 种 重要 的 神经 网 络 ; 只 允许 1 对 有 作用 ,对 有 
作用 . 并 且 对 -组 输入 只 运转 一 次 ,得 到 输出 ,这 种 网 络 称 为 随 
机 的 前 传 网 络 . 当 p= 十 co 时 就 成 为 一 个 前 待 网络. 这 种 网 络 在 计 
算 机 科学 、 人工 管 能 等 领域 中 有 广泛 的 应 用 , 它 是 一 种 比较 好 的 与 
传统 不 同 的 回归 模型 . 

有 关 神 经 网 络 的 进一步 知识 与 研究 ,有 兴趣 的 读者 除了 可 参 
春 前 面 所 引 的 书 [1] 外 ,还 可 参看 

[3 ]. Hertz, A. Krogh & R. Polmer Introduction to the 


theory of neural computation, LN. 1,Santa Fe Inst, Studies in 





the Sciences of Complexity. Addison-Wesley Publishing Compa- 
了 Ya 1981. 


$4.5 隐 Markor 模型 


1， 隐 马 氏 横 型 


在 以 蕊 氏 链 作 为 模型 时 ,必要 条 件 是 可 以 观测 到 这 个 链 的 样 
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本 现实 ,但 是 在 嚼 一 类 实际 问题 中 会 出 现 -- 个 马 氏 链 , 可 是 又 不 能 
直接 观测 到 这 个 链 的 取 值 样本 ,而 只 能 观测 到 这 个 链 的 过 去 取 值 
的 某 个 随机 蚌 数 5 可能 还 含有 干扰 或 误差 ,我 们 由 此 春 出 这 种 模 
型 是 出 两 个 随机 变量 列 所 组 成 :一 个 是 不 能 观测 到 的 有 限 马 乓 链 ， 
记 成 {9,7 这 0}. 男 - -个 屁 * 与 之 相关 的 "可 观测 到 的 随机 变量 列 ， 
记 成 1O, 230}. 在 这 里 与 之 相关 的 粗略 含义 古 ;¥ n, 茶 件 购 率 
PO wl iO ve Ov oi) 

为 已 知 (最 通 帝 的 假定 是 这 个 村 件 往 率 与 CO。 1， 的 取信 无 
其) 于 是 ,5S 裕 0 称 为 隐 马 氏 模型 , 记 为 HMM. 其 中 人 1。 这 
0 又 称 为 隐 马 氏 链 ,{O,,n 室 0} 称 为 其 观测 链 . 此 外 ,和 参数” 也 可 以 
是 连续 的 时 间 僚 数 ， 

直面 党 一 个 例子 , 以 便于 读者 理解 这 个 模型 . 

例 4.3 有 三 个 盒子 内 容 为 ; 

红 款 数 择 球 数 


盒 1 yn 10 
僵 2 50 5 
盒 3 40 60 


对 三 个 盒 分 别 反复 做 如 下 的 抽取 ; 

第 一 盒 每 次 抽取 的 方式 为 ;随机 抽取 一 球 , 记 下 颜色 .不 放 间 
些 球 , 但 放 进 一 个 与 它 颜色 不 同 的 球 . 第 二 盒 每 次 抽取 的 方式 为， 
随机 抽取 一 球 记 下 颜色 后 放 回 . 第 三 盒 每 次 抽取 的 方式 为 ;随机 抽 
取 一 球 记 下 颜色 不 放 回 ,然后 放 进 一 个 红 球 , 现在 如 果 某 人 ,随机 
地 选中 了 - 个 盒 ,在 此 盒 中 用 上 述 方法 得 到 了 一 个 记录 ( 红 , 红 ， 
红 : 红 , 白 ), 但 是 不 告 激 我 们 是 哪个 盒 ,我 们 如 何 推测 他 是 从 哪里 
抽取 的 观测 样本 呢 ? 

令 5 中 二 在 第 个 盒子 全 =1,2,3) 中 第 次 抽取 完成 后 在 各 
使 中 的 红 球 数 ,那么 在 庆 =1,2,3 固定 时 ,| 1S 让 ;4 字 0) 各 是 一 个 蕊 
开 链 ,其 转 称 阵 分 别 为 ; 
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1 2 了 

PP 人 一 | ， 

7 10， 了 天 1 

7 
一 一 了 
100， 了 

Dy 二 4 | 

1 0; J 二 1 二 1. 


而 量 

S35" = 90, Ss = 50, S57 = 40. 
令 号 ,二 记 寻 列 中 第 nn 记录 中 的 白 球 数 (O, 只 能 取 1 或 0， 于 是 我 
们 有 


Po， 2 tl 5 1 | -= |， 
PRO :OS = bt = Uj 


=: PO, = 0) = .5. 
PIO = LS, = Is 


nO si) 


， 
= PEO, ~ 1) = 0.565, 
PE, = 53, -- S, |S = | = Ts 一 Dr 一] 
由 此 可 算出 
PVCUON ,OO O00 = {0.0,0,0,1)) 
= PU = SC 1 = O12,38s = 5, +1) 
= 0.90 x 0.89 x 0.88 X 0.87 Xx 0,13 2 0,08, 
PICOO OO O00 = 00.0.0,1)) 
=—0.5XO05X0.5X0.5 x 0.520,03, 
PEOO SO, O09) = (0,0,0.0,]1)) 


=0.4x%04X014X O04 X06 0.015. 
140 





于 是 
(该 样本 列 (0,0.0,0,1) 是 从 i 意 中 抽 出 | 出 再 样品 (0.0,0,0,i)) 


Pe yi 10.} 一 (0,0,0,0,1) | 





了 - 
>) Ep 《0 Oa es ty = O00.0,1) | 
| 


0. 64 i:—1; 
一 ‘0, 2 7 一 2; 
四 12 ? 二 3, 

可 和 见 从 第 -- 龟 抽出 样本 ( 红 , 红 , 红 , 红 . 白 ) 一 《0,0,0,0,1) 揭 概 
率 比 从 上 其 他 两 意 中 抽 出 该 样本 的 概率 要 大 得 多 . 从 而 可 以 相对 有 
把 握 地 (0. 64 的 群 信和 度 } 判 断 这 个 样本 是 从 第 -- 盒 中 抽出 来 的 . 同 
时 我 们 又 分 别 以 0. 76 与 0. 88 的 置信 和 度 相 信 它 不 是 第 二 盒 与 第 二 
盒 中 抽出 的 . 

在 这 个 例子 中 的 不 同 盒 的 拙 取 方式 可 以 抽象 为 不 同 的 编码 方 
式 , 队 而 这 个 例子 启示 了 用 隐 马 氏 模型 作 模 式 识别 的 - -种 粗略 本 
概 ， 

际 马 氏 模型 在 语音 ,说话 人 与 视觉 信 呈 的 模式 识别 中 受到 广 
泛 重 视 , 其 原因 在 二 这 种 模型 有 相当 好 的 “弹性 ”. 我 们 抽象 地 把 一 
个 隐 马 江 模 型 记 为 ,通常 它 代表 -个 特定 模式 ,在 此 模式 识别 问 
题 中 可 能 出 现 的 不 同 的 隆 马 氏 模 型 "全体 ”组 成 一 个 “集合 ”4( 全 
体 可 能 的 模式 ) ,其 中 任 一 个 元 素 4 为 特定 的 隐 马 氏 模 型 ,其 中 包 
括 此 特定 隐 马 氏 模型 的 转移 矩阵 与 初 分 布 及 观测 概率 {1Pro, 一 只 
| 一 和 3 一 之 1). 给 定 - -组 样本 观测 值 (0.,0,,…， 
0 , 它 写 某 - :个 模式 ( 隐 蕊 氏 模型 YA€E 4 的 差异 程度 (或 相似 程 
度 ) 可 以 用 一 logPOaio，…O) 来 度量 , 它 地 称 为 Bayes 距离 (有 
时 也 用 一 leg pH) 来 描述 (Do 与 某 一 模式 的 距 
离 ), 这 与 Bayes 的 统 计 思 想 ( 更 确切 地 说 ,假定 各 模型 出 现 机 会 均 
等 条 件 下 的 Bayes 推断 ) 相仿 ' 在 模式 识别 由 也 称 为 Bayes 距离 
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《虽然 它 并 不 满足 距离 公理 ). 
一 般 对 于 tO ,Crs 选取 放 七 4, 使 PO, ,1O,14") 

一 sup 忆 (0O 00, | 四, 则 是 观测 CO4.O;…,O.) 的 最 可 能 模式 . 

”以 上 的 隐 当 氏 模 型 中 ,一 般 地 需要 {CO 一 18, 一 ,O01 一 
td ni 产 1 已 知 . 这 个 要 求 太 多 .包括 过 名 的 参 
数 ,在 实践 上 不 可 能 操作 ,所 以 在 应 用 中 对 此 区 给 出 了 不 同 的 限 
制 ,使 未 知人 参数 尺 量 少 , 但 又 尽量 包容 有 代表 性 的 模型 . 例如 最 通 
【EC 一 一 (一 

— PN =v [Si)s 
He) PES,=jIO, =o, SO 一 可 
POS,=j|S, .=D) =P = Si) 
( 即 5, 的 值 与 O, 的 过 去 值 条 件 独立 ). 满足 (7,),( 百 ,) 的 典型 便 
子 是 纺 = /3 十 了 其 中 了 为 已 知 函 数 , 人 十 与 马 氏 链 1S,) 相 
扎 独 立 的 随机 变量 列 ,代表 晶 声 干扰 , 记号 氏 链 15,) 的 初 分 布 为 x， 
转移 矩阵 为 P, 再 记 
RY = POO, = velS, = 1), 
B= (bt)), 

















于 是 在 CH,), (HH,) 满 足 的 条 件 下 隐 马 氏 模型 的 统计 性 质 , 即 (O,， 
,0,4S1,…,5.) 的 联合 分 布 ,完全 由 参数 1 一 (r*P, 有 ) 决 定 , 即 


《rr 了 号 ), 它 代表 了 -个 特定 的 隐 马 氏 模 型 . 
2. 利用 HMM 作 语 寄 识 别 的 简化 例子 


为 了 和合 读者 了 解 HMM 的 作用 和 优点 ,我 们 以 HMM 在 语音 
识别 中 的 应 用 为 例 , 为 此 ,我 们 简单 化 了 实际 问题 ,以 便 突 出 问题 
的 实质 与 基本 点 .此 外 ,尽管 在 具体 应 用 中 细节 的 研究 和 处 理 是 十 
分 必要 的 ,但 我 们 还 是 摆脱 了 许多 细节 的 考虑 ,而 只 指出 关键 所 
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在 . 

一 个 词 的 语音 可 由 许多 音素 组 成 ,例如 "发 生 " 这 个 词 由 达 ， 
Fa( 表 示 从 玉 到 a 的 过 沪 },al[]( 空 ) 5h yshelsh 到 e 的 过 洲 } en， 
nng 等 浓 素 组 成 (后 面 可 加 十 足够 的 口 { 空 )), 而 且 每 个 音素 究竟 
维持 多 少时 间 单 位 ,对 不 同 的 人 ,对 同一 人 在 不 同时 间 说 这 个 词 ， 
都 可 能 有 很 大 不 同 . 于 是 “发 生 ” 这 个 闭 的 发 彰 就 可 考虑 为 -一 个 马 
氏 链 , 它 具 有 如 下 形式 的 转移 ， 














甚 中 状态 之 间 有 箭头 时 表示 可 能 以 正 概率 有 转移 , 实际 上 ,我们 听 
多 的 并 非 这 个 词 对 应 的 马 氏 链 ,而 是 声波 信号 的 采样 或 其 在 一 小 
段 上 的 Fourier 变换 等 经 过 处 理 的 信号 ,这 就 是 观测 值 1O, ,11) 
(这 种 观测 入 也 可 能 是 连续 型 随机 变量 ). 

对 于 每 个 可 能 接收 到 的 词 , 我 们 都 构造 -个 隐 马 氏 链 . 于 是 就 
把 语音 的 机 器 识别 问题 化 为 :从 一 族 ( 可 能 是 上 干 个 ) 隐 马 氏 链 模 
型 中 选取 -个 与 之 "最 近 的 ” 隐 马 氏 链 模型 ,而 其 代表 的 河 就 判定 
为 这 个 观测 对 应 的 词 . 所 以 这 就 是 ; 找 1 使 

POOL ) 一 sup 已 CD ,2,0, 12), 
其 中 Y ACE 4 代表 一 个 词 . 

在 具体 用 RMM 作 语 音 识别 时 ,还 需要 解决 佑 计 统 计 人 参数 
(zx,P,B) 的 问题 ( 道 常 称 为 “学 习 * 或 “训练” 阶段) 以 及 计算 
DO ,00 | 放 的 问题 . 通常 最 常用 的 是 EM {expectation of max- 
imization ) 算 法 ， 而 我 们 简 述 此 算法 的 思想 ,详细 可 敌 导 有 关 专 
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普 ;, 例 如 : 

Lawrence Rabiner &Biing -Hwang Juang: Fundamentals of 
Speech Recognition Prentice Hall. Internation Editions ,1993. 

LL. 有, Rabiner, A Tutorial on Hidden Markov Models and 
Seiected Application in Speech Recognition, Proc. IEEE, 77 (2), 
257-.286,1989. 

如 何 把 每 个 词 对 应 - -个 4= (xz,P,B) 呢 ?这 就 需要 这 个 词 的 重 
复发 音 ,把 人 不同 : 塘 个 人 的 同 -- 个 发 音 的 声 信 号 的 实际 mw 个 测试 值 
当 作 OOW Er), 由 此 人 生计 4= (zrtP,BB). 在 估计 4 时 ,把 
SS 9 看 成 删 失 的 数据 ,用 删 失 数据 的 EM 算法 先 代 地 估计 
4, 其 梗概 为 :用 标准 人 的 发 音 ( 称 为 模版 ) 得 到 初 值 (5)? ,… ,Sm)， 
由 它 及 (OB ~… ,O09 (js<m) 根 据 频率 估计 -个 4 值 , 记 成 4”, 用 
这 个 初 模型 人” 及 O( 我 们 用 它 来 代表 CO ,…,O,)) 估 计 5m (代表 
《9529 再 用 口 及 3 估计 4 得 和 5 归纳 地 ,用 A 及 
估计 S” 0 ,再 用 〇 及 S41 估计 得 A*'10,Robbin 证 上 明了 :在 每 
次 估计 时 ,用 适当 的 修正 量 , 就 保证 了 和 的 收 伍 性 , 即 存在 - -个 
4 悚 在 某 种 特殊 的 收 化 会 义 下 有 A 一 4 ,于 是 模型 4* 就 认为 是 
这 个 词 的 模型 ,从 口 得 你 的 过 程 称 为 “训练 或“ 学习” 因为 计算 
其 相当 大 ,在 具体 操作 中 , 常 把 计算 简化 成 一 个 对 的 递 推算 法 ， 
这 就 节约 了 天 量 工 作 量 , 再 则 ,如何 把 -个 测量 值 0 分 成 4 份 , 成 
为 CO, 也 需要 视 实际 情形 作 不 同 的 探测 ， 这 些 细节 问题 当 
然 不 在 本 书 介绍 之 列 . 

在 具体 应 用 中 还 可 以 把 一 个 声母 或 韵母 当 作 一 个 隐 马 氏 模 
型 ， 


3. 注 


1 C 还 可 以 是 连续 型 的 随机 变量 ,人 重 如 C9, ) 改 为 PO, lsS,, 
本 一 于， “0 为 Ap 或 为 NC SN ED) 的 混合 分 布 ,这 
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时 巨变 汶 参数 (有 蝶 (py Salea 为 汇合 的 系数 )， 

2) 若 3S, 好 齐 次 马 慌 链 , 这 时 它 在 任 “个 状态 上 的 停留 里 间 r 
应 服从 指数 分 市. 对 于 有 些 情 癌 ,例如 在 语音 识别 中 ,如 果 停 留 时 
间 分 布 异 车 的 不 居 指数 分 布 ,那样 可 以 改 一 下 模型 . 没 停留 时 间 
具有 密度 /zi 设 它 可 由 几 个 参数 完全 确定), 转移 情况 不 变 , 这 
样 的 1,2 泽 1 就 未 再 是 马 氏 链 了 , 称 为 半 马 氏 链 . 于 是 我 们 的 
FIMM 改 为 隐 半 纪 氏 模型 . 可 殿 的 是 这 种 改进 模型 极 不 易 计 算 . 又 
由 于 Bayes 外 离 就 是 已 知 样本 为 的 菜 件 下 , 它 在 模型 4 中 出 现 
的 概率 . 在 实际 使 用 中 这 两 个 模 增 其 实 差 别 并 不 如 它 看 起 来 那么 
大, 例如 闪 蕊 氏 机 型 与 马 氏 模 增 对 问 定 样本 口 得 天 的 Bayes 距离 
的 差别 是 很 小 的 (几乎 没有 ). 因 之 并 没有 被 广泛 采用 . 

3) 数字 识别 .文字 识别 也 可 以 用 隐 马 氏 模型 ,只 是 “时 间 参 

2 变 成 了 空间 参数 , 在 非 在 线 的 文学 识别 中 ,往往 还 需 两 维 的 

0am 参数, 所 以 相应 的 马 氏 链 就 应 是 " 冯 参 数 马 氏 链 ”, 或 者 称 为 
马 氏 场 (Markov field). 











$ 4.6 随机 决策 模型 


设 有 某 种 系统 , 它 随机 地 处 在 一 (人 12 中 的 某 个 状 
态 . 在 策略 确定 为 a 的 情况 下 系统 的 状态 是 依照 -- 个 矩阵 (a) 作 
为 转移 概率 阵 而 变化 . 这 就 形成 一 个 决策 过 程 , 

让 我 们 先 来 看 一 个 例子 ,以 便 得 到 一 点 直观 的 认识 . 

例 4.4 某 经 营 系统 总 处 在 "1”,"2”,*3” 二 种 状态 之 丸 设 
在 每 个 整 值 单位 时 刻 可 有 两 种 选择 ;a 或 zl 假定 在 采取 动作 a 
和 他 时 , 状 丰 间 的 转移 矩阵 分 别 为 





0.5 0.5 0 0.5 D 0.51] 
Pd} = 0 ,9 .51, Pt{d;,) 一 0.5 0.5 QQ 四 
0.5 0 05 oO 0.5 05 


又 长 开 始 时 (即时 间 "= 时 ?该 系统 以 相等 的 可 能 性 处 在 这 二 个 
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状态 之 一, 即 初始 分 布 为 | 二 , 计 , 训 |: 车 处 在 状态 i 并 采取 di 时 
能 得 到 报酬 为 gt tt) 一 2 而 处 在 状态 : 并 采 联 a; 时 相应 得 到 的 
报酬 为 gid) 一 产 二 0.5. 我 们 要 在 各 个 时 刻 有 目的 地 选取 动作 
di 或 让 .使 在 Da 委 到 时 的 平均 累积 报酬 最 大 ， 

假定 在 时 刻 采取 的 动作 编号 为 a,( 它 只 能 是 小 或 di 之 

人 

Pd), 若 取 a 为 以 ; 
0 fp. 若 取 a 为 di 


于 是 由 初 烙 分 布 了 一 Cn 了) 一 | 村, 村 .本 | 及 非 齐 次 转移 托 阵 


列 jP(ao1 决 定 一个 二 状态 马 民 链 {5:4 实 0, 这 个 三 状态 马 氏 链 
5 就 是 在 时 刻 n 系统 所 处 的 状态 . 于 是 在 时 刻 m 前 所 得 的 平均 累 
积 报酬 为 五 a ,aa)) ， 

我 们 简单 地 限制 在 时 刻 >” 所 采取 的 动作 只 依赖 于 当时 所 处 的 
状态 ,也 就 是 as 只 是 总 的 函数 dr fC {I 2, 3 {ds 
942). 下面 我 们 以 4 二 1 为 例 , 看 看 如 何 求 得 最 高 的 平均 累积 报酬 . 
也 就 是 让 ao 一 (5 va 一刻 ($1) ,要 选取 消 数 (映射 )f,, fi, 使 

VN) A Eg(é ,fote)) 十 五 BC sf (£)) 一 max. 

为 了 易于 看 到 实质 (我 们 把 初 分 布 (173,173,173) 记 为 TR: 
X37) ,我 们 注意 
ge — GD) 


了 


而 因为 采取 了 动作 2 一 大 (CR ,所 以 马 氏 链 1 :六 0 从 时 刻 总 到 
时 刻 1 的 转移 矩阵 应 为 亚 C 六 Ce) ,于 是 


3 
PS = 7 = Dnp, hl)). 
1 





从 而 
FEES ED) = Dg A DPE 一 用 
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人 Oo 站) 二) 
] 


r=1 1 


4 3 
= Dr De ODNp DD). 


r 一 1 





也 就 是 
VED Dna fiD) + Da fp ttn) ]. 
| r=] 
愉 上 上 式 可 以 看 出 ,要 选 根 六 ,六 使 7 六 六) 最 大 ,就 先 要 选取 矿 
使 EC 三 上) 六 居 量 大 , 为 此 我 们 注意 
8 = 2jg(tjd) = + 0.5: 
=1) gd) 2 gd) =— 3/2; 
C=2) gl) i Hd) = 0/2; 
=) gad) = 6 < gd) ~ 19/2. 
从 而 可 见 要 使 g(j,AC) 大 应 取 刻 二 "其 定义 如 下 : 
FD dy f= ds Ff") = ds. 
这 样 就 确定 了 六 . 记 此 时 的 最 大 报 央 为 : 


过 了 一 1 
有 (让 一 ED 一 492， 了 一 2 
1 372， 1 二 3. 


于 是 VC,f*) = PAA 十 这 8* CNPpfoti))], 现 
件 看 如 何 选 取 fo ,使 VC ,hn') 最 大 , 为 此 只 需 使 方 括号 中 的 各 量 得 
到 最 大 . 现在 与 前 面 不 同 处 只 在 于 现在 用 方 括号 中 量 代替 了 前 面 的 < 
C5). 我 们 列 出 它 的 值 ,注意 到 p, (Cd ) 与 pi;(d,) 的 定义 , 便 得 


Blird1) 十 Sg: (pdi) Blinds) 十 Da (让 六 el) 
4 


1 一 1 2 十 972 372 十 1972， 
7 -一 了 4 197/2 972+2} 
1 一 3 日 十 了 1972 十 82) 
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比较 工 面 每 - - 行 的 大 小 ,可 知 应 取 fs 一 记 " ,其 定义 为 ; 
Fe ds f= di fo (3) = dl,. 
其 对 应 的 最 大 售 分 别 为 :11;27/2,.14， 所 以 
VE 一 (01272 十 14)73 一 7776， 
于 是 最 佳 策 略为 (六 :7 的 定义 时 于 面 )， 
a fe EY a = A (é). 
而 最 沪 下 均 罕 积 报酬 为 了 CA 7 一 7776 . 

总 结 - -下 ,从 这 个 倒 - 于 可 以 者 出 要 取 最 佳 的 as 一 (es), 即 要 
决定 最 佳 的 * 状 态 刘 动作 的 对 应 ”六 ,而 有 日 “要 舍 圳 定时 到 最 大 的 
2 所 对 应 最 佳 的 六 ,然后 选 定 最 佳 的 /i. ;,… ,最 后 选 定 最 佳 的 
六 "就 得 到 合 在 - -起 的 最 佳 行动 策略 Cf",…,/。*》 

由 这 个 例子 我 们 可 以 抽象 出 下面 的 数学 模型 . 

设 己 (9 是 一 个 以 112 为 状态 集合 并 带 有 参数 。 
( 近 有 限 集 4? 的 转移 证 阵 : 


天 = (pa) pens A, 
4 称 为 行动 集 , 它 牙 合 有 限 个 行动 . 
首先 我 们 考虑 威 简 单 情形 , 设 在 时 刻 0,1,-… 各 选 :个 行动 

(EE 4), 那么 由 初 分 布 zi 及 {Plaw) :nn 宕 0) 可 决定 -个 非 
时 齐 的 切 开 链 人 从,:n 宇 0} ,满足 ， 

[PC 一 站 一 mo 人 Cr) zo 的 第 : 个 分 量 ; 

LPG = je = = pu 
假定 在 采取 行动 列 fa。} 1! 时 我 们 在 时 刻 mx 前 能 取 到 的 累积 报 柄 为 


8.($.1a.) ,其 中 (iva) 是 在 时 刻 # 采取 行动 日 这 时 马 氏 通 
$4 的 取 秆 为 ?时 能 得 到 的 报酬 负 数 . 那么 ,平均 报 柄 为 
Fa Sg sa). 
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贡 在 我 们 考虑 较为 复杂 - 些 的 情形 (下 而 的 例子 号 是 属于 这 
种 情形 ), 即 a, 的 卡 值 是 依 束 于 状态 ia 一 /0), 其 中 六 是 3 一 
站 的 歧 射 . 意 叫 是 时 刻 症 如 号 氏 链 的 状态 为 区 则 采取 决策 六 (Ce 

令 记 全 (pC.0DD,, ws 它 要 是 一 个 随 视 阵 . 由 {这 
0 决定 卫 :个 间 时 齐 己 氏 链 过 :zz 痉 01 类 似 地 由 报 一 消 数 gg tisa) 
可 以 得 到 时 记 关 前 的 平均 报酬 . 由 上 这 个 马 乓 链 依赖 初 分 布 mm 
可 映射 列 : 廊 汝 0 我 们 记 FS 六 一 六 人 丰裕 靖宇 0, 并 称 节 
为 “个 策略 . 记 相 应 的 平均 报 副 为 所 | > geveol ,注意 到 对 
下 马 氏 链 的 一 个 "轨道 "6, 名 ,下 而 诗 , 实 际 上 我 们 采取 的 
行动 列 为 /会 Cit 6 二 ))( 称 为 一 个 蕊 到 策 覆 )， 
这 时 a, 也 是 随机 的 ,而且 必 一 六 (各 )， 对 应 于 天 在 时 刻 加 前 所 
能 取 乔 的 平均 报酬 记 为 .Cry : 

Ta)) 一 人 Dean 
蕊 乒 随 机 决策 的 基本 问题 是 :寻找 一个 下 氏 策 略 广 ,使 J ro fF ) 
sup7 (xorvf《 这 里 sup 取 广 所有 的 沁 氏 策略 ), 这 样 的 f° 如 果 存 
在 , 则 称 为 最 佳 马 氏 策略 . 

若 Y ,让 不 依赖 种; 即 四 一 co 与 总 无 美的 “各 ”行动 )， 
这 种 策略 记 为 "会 (cssm 莽 xz 节 0) , 称 为 独立 党 策略 . 当然 还 可 以 讨 
论 人 0.:n 衬 0 为 与 {tn 实 0} 独 立 的 独立 随机 列 情形 ;这 时 a= {a.， 
之 nD0} 称 为 独立 策 酷 . 

定理 4.2 在 所 有 的 号 氏 策略 类 中 存在 最 佳 马 氏 策略 六 { 末 
必 唯 一 )， 

F 面 的 证 明 过 程 就 是 寻找 一 个 最 佳 马 氏 策 略 的 具体 方法 . 为 
此 我 们 要 在 马 氏 策略 中 构造 -个 最 佳 的 . 府 怕 造 最 佳 蕊 氏 策 略 了 
的 方法 仿照 本 节 开 始 的 例子 中 的 情形 ， 

上 报关 0， 使 

8ngzyritr)) 一 maxg, re (A Ew (FY. 
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再 取 产 -( 门 ,使 
有 0) + pfs Ci) ge" 人 


= max| gw 1 十 Dp es DN hy Bm! " C70). 


向 后 递 推 地 取 万 (使 
ED 二 





= maxi grisa) + Dp gi |(A gr C0). 
这 就 得 到 了 Co ,3 ) 
为 了 让 明 它 基 最 佳 的 ,只 需 对 Y 了 二 (/.:0n 信 mp) 定义 策略 ，: 
A = Chor fi sa) 
并 且 用 后 向 数学 归纳 法 直接 验证 
Tosf) ES ro ft) (km). 
取 名 二 0 即 得 Ar, 门 才 J xo/ )， 我们 略 去 这 段 验证 . 

注 1: 以 上 寻找 广 的 办 法 在 计算 机 上 进行 时 是 非常 简单 的 . 问题 在 于 
当 行 动 集 4 的 元 素 个 数 很 大 时 ,计算 量 也 会 非常 大 ,其 至 难以 在 多 许 的 时 间 
内 完成 ， 

注 2， 定理 4.2 可 以 推广 到 状态 集 S 为 可 列 ,行动 集 4 为 紧 集 ,而 报 柄 
函数 g.(i,4) 为 有 界 连续 函数 情形 . 

法 3， m 二 mo 的 情 增 : 利 用 有 限 近 似 可 以 证 明 : 如 半 


> suPp |S。 fra}| < 
峙 存在 最 作 马 氏 策 略 广 : 
gs { Sac, a) ) = supEs >e (as)) 


沉 见 例子 是 折扣 报 丽 模型 即 折旧 模型， 
在 = gotisa), 
其 中 0<r<cl 是 折扣 因子. 
注 4， 号 氏 策略 f= Cf;n 庆 07 如 满足 了 = 六 人 #7 , 则 称 浆 平稳 弓 开 第 
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略 , 对 上 折扣 报 柄 摸 现 :pt 一 gay (O71 记 J0 让 全 
Et Css 设 最 伟 蕊 氏 策 略为 六 一 Cs 月 记 
本 fs 
睦 中 有 三 个 疝 ,那么 用 财 纳 法 可 以 让 朋 
EY HD i ot), 

今 二 一 得 央 0 这 总 昧 着 二 稳 蕊 氏 策略 /和 "一 
CA) 志 是 一 个 最 居 瑟 二 策 略 . 

利用 不 动 岂 型 伦 还 可 以 证 明 : 对 折扣 报酬 模型 , 若 S 可 列 ,4 紧 , 有 日 gti， 
a) 有 界 , 则 平稳 与 戊 策略 了 是 最 儒 策 略 的 充 要 条 件 是 它 宝 足下 述 Beliman 方 
各 (动态 规划 方程 ):¥Y :ES， 

cf) = max{ g- (rue) 4r DpulayT Nl. 
紫 时 ,CC*，. 户 是 下 述 非 线性 变 挽 了 (7 的 瞧 一 不 动 点 ( 芭 4 站 满足 方程 
TTY -1): 
(THAD) A maxtgol sd) tr 人 ia) 

这 个 阁 论 的 优点 在 于 ;对 上 折扣 报 柄 栅 弄 ,定理 4,2 中 的 六 可 出 c= 笋 替 
‘ 即 扩 和 似 } ,而 后 痢 的 最 佳 策略 是 平稳 马 氏 的 ,只 瞩 求 出 变换 了 的 不 动 点 即 工 
4 一 J 的 解 JC+} ,时令 

A 在 {a st 二 pa EY max } 

中 可 ,其 计算 量 将 大 大 地 减少 . 有 时 用 7”(0) 来 近似 也 是 恨 有 用 的 ,此 
处 0 是 零 且 射 ,而 了 "公开 :本 。…。 为 映射 荆 的 mw 深 复 合 ， 

注 5: 最 后 我 们 可 讨论 更 为 “ 般 的 模型 , 设 $ 与 4 仍 都 为 有 限 集 . 允 设 
随机 变 嵌 如 人 话 ,1 满 时， 

Pt, 一 了 总 = 1 三 -1} 一 tds), 
其 中 必 由 下 式 递 推 地 确定 : 
[nm = rp 
-a LC 3 rn -1 fn }. 
显 见 这 时 人 入:n 安 0} 不 再 是 马 氏 链 了 . 因为 它 依 不 于 所 有 的 过 去 . 而 日 此 时 a 
考 一 个 依 顿 于 (名 的 随机 变量 . 如 仍旧 记 f- Cn 和 
15] 








个 第 上 暑 . 对 上 这 个 模 增 也 娄 仙 地 可 证 祥 最 住 策 略 , 事实 上 ,对 于 这 个 模 再 可 以 
证 央 ; 定 朗 4.2 中 的 最 佳 污 氏 第 略 也 还 是 这 里 的 最 住 第 略 . 也 就 中 最 挂 导 氏 
策略 在 以 上 定 交 的 非 蕊 氏 策 略 类 中 也 仍 是 最 佳 的 . 


习 题 


1 坛 涪 明 ”个 家 族 如 世代 至 多 生 两 个 子女 ,男女 有 相间 的 出 生 
次, 而 只 有 男性 才能 继承 家 族 的 姓氏 ,那么 此 家 族 的 姓氏 必 将 绝 传 . 
2. 在 鞋 题 中 如 此 家 族 每 代 都 生 三 个 子女 , 试 求 此 家 族 姓 氏 缀 
传 的 概率 . 
3. tLamperti 最 大 分 支 讨 程 ) 念 全 一 0 1 2 一 1， 
2,3,} 为 独立 同 分 布 序列 ,PC 二 让 二， 二 0,1,…), 叉 邻 : 
Al 一 Max {6 


试 证 明 {2.;n 一 0,1,…} 仍 是 -- 个 马 氏 链 , 并 求 其 转移 阵 . 当 


1 
< nll: 
DOD, 了 一 站 
证 明 : 


limP (Zn Sr oe ， 
4. 设 简单 分 支 过 程 的 平均 分 裂 个 数 为 pi 天 ,二 1] ,分 型 数 的 方 
差 为 o| 一 WY sop) ,证 明 


Var 一 Jp D/Ap TD 如 uA 1 
如 对 如 一】 
5 对 以 下 三 种 ,给 出 不 灭 维 的 概率 的 图 解 ,并 求 出 相继 丙 
代 间 平均 规模 的 递 推 公 式 : 
a Op 二 六 op 一 人 ( 疡 十 & 一 1); 
b.p, = p(t = 0,112,); 
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Coffe i 

8 生物 的 外 部 玫 征 (如 肤色 .眼睛 颜色 .头发 颜色 等 部 贞 
对 基因 块 定 ,组 成 这 对 基因 的 待 选 彰 可 以 和 优势 基 朵 5 记 为 过 ) 与 
洗 热 基因 (i 为" ) 两 种 ,因此 这 对 基 内 可 以 是 下 列 之 一 ; 优 种 
(Cad . 混 种 (ar) ,省 种 (rr )., 车 一代 的 基因 对 来 白 随 禄 地 选取 父 
本 的 基因 对 中 的 -个 与 母 本 的 基因 对 中 的 -… 个 . 

《1) 对 任意 个 休 , 每 次 用 一 温 促 与 之 交配 ,所 得 的 后 代 仍 用 泥 
种 与 之 交 阳 ,如 此 继续 . 请 构造 个 描写 这 种 传代 的 马 氏 链 , 并 求 
它 的 不 变 分 布 .以 及 从 优 仲 出 发 首次 返回 优 种 的 平均 代数 . 

(2) 对 任意 个 体 , 每 次 用 优 种 与 之 变 配 .请 构造 马 氏 链 ,证 明 
优 种 下 吸 收 态 ,并 分 别 求 从 混和 神 及 劣 种 出 发 变 为 优 种 的 平均 代数 ， 

?. 色 彰 的 遗传 由 两 种 基因 r 与 决定 ,男性 只 有 -个 感 因 (er 
或 中 ,女性 可 有 两 个 基因 (ec.ecs 或 4)， 当 基 人 有 基因 “或 ce 时 就 
有 人 色 谊 . 已 知 关于 基因 的 遗传 规律 是 :男孩 只 以 等 概率 地 继承 母亲 
的 两 个 基因 之 ,而 女孩 除了 以 等 概率 继承 母亲 的 两 个 基因 之 -. 
外 ,还 要 继 藉 父亲 的 堵 个 (可 见 母 亲 的 色 育 必 传 给 男孩 ,但 未 必 传 
浴 女 孩 ; 而 若 父 亲 为 非 色 育 则 女儿 一 定 不 是 色 育 ). 邻 设 某 家 有 -- 
辫 儿 .其 公 为 色 家 , 亨 她 又 嫁 给 了 -- 个 色 育 的 男子 ,他 们 生 下 一 女 ; 
此 女 叉 嫁 给 了 一 个 色 育 的 男子 ,又 生 下 第 三 代 女 儿 , 仍 嫁 痊 色盲 田 
子 ,…" ,如 此 继续 . 

试用 马 氏 链 描写 基因 的 转移 . 并 说 明 

limP( 第 = 代 女 孩 为 色盲 )》 = 1. 

8. -个 服务 系统 由 个 工作 站 串 接 而 成 ,在 服务 要 求 到 法 第 ; 个 工 
作 站 时 能 处 理 的 概率 为 "拒绝 处 理 的 概率 为 gq, MB r= 1- -pg 
(7 Sr 一 0) 的 概率 把 它 转 给 第 ;十 1 个 工作 站 处 理 , 试用 马 氏 链 来 
描述 ,并 确定 在 第 j 个 .C 作 站 的 服务 要 求 平均 在 经 过 多 少 个 工作 站 才 
得 到 解决 或 拒绝 处 理 ,被 解决 与 被 拒绝 的 概率 各 为 多 大 ? 
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第 五 齐 Q- 过 程 及 其 尺骨 


在 本 剖 中 .我 们 讨论 连续 叶 间 参数 的 马 氏 链 ( 本 数 状 态 空间 ， 
及 其 应 败 . 在 $5.1 中 我们 首先 给 出 最 简单 的 连续 时 间 参 数 蕊 氏 
链 - Poisson 过 程 作 为 此 类 马 氏 过 程 的 典型 ,在 85.2 中 我 们 进 
- 步 讨论 较 “ 盘 的 连续 时 间 和 参数 的 马 氏 链 及 其 应 用 . 


8 5. 1 Poisson 过 程 


Poisson 过 程 是 最 简单 的 连续 时 间 的 马 氏 链 . 虽然 它 箱 单 , 但 它 
很 有 特征 地 表现 了 到 非 负 整 数值 的 随机 过 程 的 特点 ,这 类 过 程 具有 很 
好 的 典型 性 ,因而 具有 广泛 的 应 用 ,又 是 许多 问题 进 -- 步 研究 的 基础 . 
Poisson 过 程 与 Brown 运动 并 称 随机 过 程 的 两 大 基石 . 

下 面 我 们 就 用 一 个 简单 例子 来 说 明 Poisson 过 程 的 模型 ; 


1 事故 申报 的 Poisson 过 程 模型 


例 5.1 考虑 在 时 间 fo,z] 中 某 保险 公司 的 某 类 事故 申报 的 
累计 次 数 为 扣 , 这 个 数 对 固定 的 上 是 随机 的 , 即 在 时 间 + 之 前 我 们 
并 不 能 确定 $ 的 值 . 但 经 过 分 析 , 我 们 可 以 认为 它 具 有 : 

1》 独立 增 量 性 :在 互 不 相交 的 不 同时 间 区 间 内 事故 申报 的 数 
量 是 相互 独立 的 ， 

2) 时 齐 性 :在 (1,t 十 sj] 的 时 间 内 事故 申报 的 人 数 的 分 布 与 
无 关 而 只 依赖 于 s. 

3) 普通 性 :在 无 穷 小 区 间 (1,t 十 At] 内 有 两 个 或 两 个 以 上 事 
若 申 报 的 人 慨 率 是 A 的 高 阶 无 穷 小 ,而 有 眼 时 间 区 和 间 ks,s 十 二] 中 
的 事故 申报 总 是 有 限 的 .月 名 = 0. 
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将 于 而 的 假 诈 用 数学 公式 表达 出 来 我 们 就 得 到 直面 的 译文 : 

1 中 让 不 林 交 的 区 闻 (50 (rss oo ( 即 有 < 
入 有 的 随机 变量 名 一 二 
和 一 对 .相持 独 习 ， 

2 二， 对 于 不 同 的 上: 同 分 布 , 于 是 可 令 
Pt 


2 _ 
37 hm Dé ¥ 二 名) 一 D0 
A A 


有 
PD) 十 疡 (art) 一 | tA ), (C5. 1) 
由 ] 直 与 2 进而 得 到 
六 0 一 0 一 0) 

— po pe -上 二 0) 

一 poels) pott), (5. 2) 
于 是 对 于 上 与 整数 点 .我 们 有 
Pol kt) = (pelt) Yt, [| | 上 =— plr). 








从 而 
pl | = (pate)F, 
到 对 于 Yz 及 有 理 数 + 有 
Patriy) = (poltyy, 《5. 3) 


于 是 (pCr))? 一 pp.(1), 与 有 理 数 7 无关, 若 po(1) 二 0 , 即 对 - 
切 有 理 数 -mcr) 一 0, 它 著 合 普 志 (S., 一 各 写 1) = 1(Y 有 理 数 
六 ,也 就 是 说 在 任意 的 小 区 间 | 二 十 a| 内 至 少 有 - 次 事故 申 
报 , 这 样 一 来 在 (0,1] 中 就 应 有 无 限 多 次 事故 申报 ,因为 

1 人 im 


lm TF 4 一 Fe! 11 = 1， 





这 就 与 3) 中 吕 过 十 ee 的 假定 矛盾 . 可见 加 人 ) > 9 .ib logpot1) 
一 -4 则 0 和 14< 十 en ;而且 polr) 二 e “(rr 有 理 ). 再 利用 pol) 
六 0 的 单调 非 增 性 ( 若 (0,z j 中 无 事故 , 则 Vs 二 区 (0 中 无 事 
故 ) ,由 数学 分 析 的 常规 推理 可 知 
Polt) = er* (CY). ‘5.4) 
青 由 1 一 3 六 ,我 们 有 
PCO 十 x1 中 恰 有 不 十 1 个 事故 申报 ) 
一 了 (C0, 二 中 恰 有 上 个 事故 ,而 (ot 二 A 和 恰 有 一 钦 当 故 ) 
十 了 C0, 站 中 恰 有 上 有 十 1 个 事故 ,而 (vit 十 Ai] 无 事故 ) 
十 ofaz) 
一 pNP 十 pi paddy) 十 OAr) 
= PA — polAL) TT ole) + pliye 这 


Pritt 十 At) 一 Partritft) 
A 





~ prt fe 
令 At—- 0 ;有 边 极 限 存在 , 它 是 Pi (tA pa 下 
递 推 微分 万 程 


dp te) 
A = Ap tt) Apil2) (CR = 0,1,2,.). (5.5) 








由 于 
SpA SE- p00 =0 21), 
亲 遇 有 级 法 计算 但 [用 篆 区 


上 
ptf} =e-* 《与 . 6》 


这 说 明 上 遵从 Poisson 分 布 ,而 


= np 一 “2 “(5.7) 


可 网 和 为 单位 时 间 内 全 平 吉 最 而 有 
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二 Var6 一 一 5 CE EY pnt) 


1 、 
一 = > Pro 1) 十 mL — 2X) 十 (7 ]| 人 | 


n= 








| > Ce 。 -二 2 十 


ml 
一 CO 2 = 

叮 由 也 为 单位 时 人 间 内 的 平均 平方 偏差 . 

注 1， 3) 在 1 与 2) 下 等 价 于 下 述 的 3), 它 在 普通 书 上 更 常见 ,而 县 更 易 
下 处 理 , 代 是 不 如 引 直 观 : 

3) 在 tivt 十 At] 内 有 了 两 个 或 两 个 以 上 事故 申报 的 概率 为 otA1) ,而 有 
一 个 事故 申报 的 概率 与 避 成 正比 (这 个 比率 就 是 A), 

注 2， 朱 成 的 分 布 列 的 短 母 函数 定 文 为 


Et) 全 和 人 2 


£=B 





可 由 05,4) 及 (5.5) 得 到 它 满足 的 瞩 程 (对 :的 常 微 仙 方程 ) 
下 全 一 一 好 (te + hg tis), 
及 初 值 
(DT = 1, 
它 的 解 为 


中 人 上 ei 
贞 此 也 可 得 到 有 末 从 Poisson 分 布 ,这 比 妇 纳 地 解 (5. 5) 能 更 快 地 得 到 结论 
15, 6 而 且 易 于 推广 . 


2. Poisson 过 程 作 为 一 个 马 氏 过 程 


首先 ,上 段 的 假设 1) 说 明了 随机 过 程 & 一 {sf 这 0) 具有 独 

立 增 量 性 : 即 对 任意 互 不 相交 的 时 间 区 间 上 过 程 的 增 量 都 相互 独 

下 .这 类 过 程 -- 定 有 马 氏 性 ,事实 上 ， 对 OR 
lar7 


为 了 oisson 过 程 是 概率 
为 1 地 不 会 随时 间 下 降 的 ,所 以 这 里 取 的 状态 随时 提 非 隆 ). 考察 
PE, = én a 


它 等 十 


PE 

由 独立 增 其 性 及 时 齐 性 .上 式 应 为 
一 I 本 A 
PE EO PE De’g pr 


可 史 放 一 二, 疡 0} 有 具有 这 样 的 统计 特性 :在 己 知 现在 所 处 状态 的 
亲 件 下 ,过 去 与 将 来 发 生 的 事 是 独立 的 .也 就 是 说 具有 马 氏 性 . 
与 第 三 章 中 沁 氏 链 相 同 的 是 , 它 的 时 间 参 数 是 连续 的 .所 以 称 为 过 
续 参 数 乌 氏 链 . 并 日 有 
PE = =) = P= je, = i). 
由 而 它 叉 是 时 齐 的 - 它 的 转移 概率 可 由 甜 阵 吉 示 : 
(PE, t=) 








| NY Ye) .| 
| 21 31! nl 
| 21 《到 一 3 
= e 
1 a 
J 
《5, 8) 


一 般 地 ,以 (5.8) 为 转移 阵 上 日 上 一 0 的 连续 时 间 参 数 马 氏 链 叫 
Poisson 过 程 . 事实 上 ， 它 等 价 于 说 这 个 随机 过 程 满 足 第 一 段 中 的 
假设 1) 一 3)， 
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Poaisoon 过 程 是 :类 非 稼 盟 型 的 摘 述 纯 随 机 窗 大 下 伴 的 过 程 ， 

失 了 上 而 著 机 的 保障 会 可 的 事故 申报 外 , 像 电话 妆 换 在 或 服务 系 

统 机 底 射 性 炉子 的 到 来 ,码头 济 售 船只 的 到 来 穿 富 部 可 以 在 
定 的 时 间 放 型 贞 .在 -… 定 条 件 了 近似 看 作 Poisson 过程- 


3. 复合 Pnisson 过 程 (Compound Poisson process ) 














葵 在 例 );.1 报 的 事故 的 赔偿 费 是 独立 同 分 市 的 随机 
变量 刚 : YY 7. 2 并 与 申报 次 数 独立 , 则 到 时 间 * 保险 公 
3] 共 凡 使 的 金 帮 4 ; 

be 














设 六 的 分 布 是 
HkY = POY = Ak) 《人 一 12) 
那么 当 j7 守 7 时 
一 一 (一 一天 
一 了 CYeril 十 Yers 十 不 Ye =i 一 ?| 二 + 十 Ye 一 让 
二 PY Yerstt At Ye =j—1) 
一 了 (FY. 十 十 十 Ye 一 了 .i) 








一 OPTTY+ =) i eh 


= YS PE Ef 


4 一 1 


AT 有 TT - . 
= 3 CO 
其 中 .六 * 是 了 的 & 重 卷 积 , 即 


| 和 站 CF * A 0m) 从 >» At 1 fm 1) 
Ci 





容易 看 出 {1 宇 0) 具有 蕊 氏 性 ,而 且 还 是 时 齐 的 ,上 其 转移 矩阵 
是 : 

Cpolsst)) = (Cp, lt — 1)), 
其 中 


PC 一 一 3 sO Sa 5,9) 


对 一 -在 面 , 同 时 对 < 我 们 有 
PAK = iIX, = = Pt t= 0 = eo, 
可 见 当 ?= 了 时 (5. 9 仍然 成 立 . 
形 如 (5,9) 的 转移 矩阵 决定 的 时 齐 蕊 代 链 {其 中 了 可 以 为 任何 
‘ 取 融 数值 的 ) 分 布 ) 称 为 一 个 取 整 数值 的 时 齐 的 息 合 Poisson 过 
程 (如 果 赔 偿 站 未必 取 整 值 ,那么 对 应 的 XX, 仍 称 复合 Poisson 过 
程 , 它 可 以 取 实 数值 ). 设 ,一 0, 令 玉 (z) 一 2 fe 风 


CF = DF’, 


进而 得 到 
A EX, 一 #01), 
四 一) 十 Hs 
其 中 
te) = Pp = DD) Df Rees 
= Io kh 
= 2 Ce ee 一 Dro) CC。 
一 etre = ev Tn, 和 «5, 10) 
于 是 
和 二 《ee 
其 申 


A Di = EY,, 
= HDT pp 
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ETO 
= 
= CA A NAM 【Al 
< A 十 3 
其 中 二 VarX .可 吉 若 记 n 二 站 《此 即 在 fa, 门 中 的 平均 和 破 申 
报 数 ). 那 么 


平均 出 报 总 价值 一 BX 一 二 下 Fe 一 天 £5.112 
平均 申报 总 价 的 方差 一 ECX, 一 XY: = a 一 (0r 十 人 
C5. 12) 


(5.12) 是 复合 Poisson 过 程 分 布 特有 的 性 质 . 一 般 来 说 ,任意 
(Yn 二 42 ' 与 芷 独立 时 恒 有 以下 的 而 nld 等 式 ( 黎 见 2.5)， 
EY TY 二 Yi) = E(t)EY,, 

但 是 (5. 12) 不 -- 替 对 . 

复合 Poisson 过 程 分 布 的 各 种 参数 的 计算 可 以 为 我 们 提供 在 
一 定 的 保险 费 . 保 险 开 支 .利率 及 赔偿 的 制度 下 恒利 的 情况 ,让 各 
种 参数 变化 制 成 表格 .就 可 以 供 保险 公司 科学 的 决策 提出 可 靠 的 
依据 . 在 更 -- 般 的 保险 问题 中 ,事故 电报 过 程 还 可 以 是 其 他 过 程 ， 
但 处 理 问题 的 方法 与 Poisson 过 程 极 类 似 , 只 是 这 时 方 关 参数 就 
不 可 能 得 到 像 (5, 12) 那 样 的 显 式 解 ,但 是 我 们 仍然 可 用 计算 机 制 
表 得 到 各 种 解 要 的 数据 . 





$5.2 Q- 过 程 与 转移 速率 阵 


1 QQ 矩阵 -一 转移 速率 阵 
若 地 一 {全 ;f 写 0) 是 连续 时 间 和 参数 的 可 数 状态 时 齐 马 氏 链 , 则 
车 58S2 ys 8 + 有 
PD AP = j= 
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= D(CS,., = 了 | 二 :一 1, 一 站 = zi) 。 


而 二 , 御 降 族 {P00) = (p04 室 0) 具有 以 下 性 质 : 


(PY 0 过 PC EL, pl0) =- 他, (5. 13) 
CP) 六 pt) = 1, C5.14) 
CP,) 满足 Kolmogorov 方程 ， 
2 pupnls) = p(t 二 + s)， 《5. 15) 
用 宗 阵 形式 瑟 出 来 就 是 
POOP) 一 Plt + 4). (5, 15)’ 


这 时 (P10) 与 (Ps) 和 离散 的 博 形 完全 -- 祥 . (P;) 与 离散 情况 也 
类 位 ,只 是 ,,z 并 不 定 是 非 负 整数 里 了 六. 与 离散 时 间 情 形 不 同 的 
是 ;在 时 间 离 散 时 Pa) 可 由 PO) 决定 ;: Pn) 二 (PC 这 个 
P(1) 就 决定 了 全 部 转移 概 阵 , 但 是 在 1 连续 的 情形 并 不 存在 一 个 
最 小 的 时 间 ,那么 我 们 是 查 能 对 这 - -情形 找到 一 个 相当 的 量 呢 ?为 
了 求 得 一 些 据 发 , 先 让 我 们 来 看 看 实数 的 情况 : 若 有 实 国 数 

ppt) 一 p(n 十 到) 天 为 一 切 非 名 整数 )， 
那么 一 定 有 pln) 一 p(t1)" .但 苦 有 连续 本 数 
pp = ptls 二 站 (对 一 切 非 杀 实 数 s ,i 成立】， 
那么 p(z) 一 定 是 指数 晤 数 ， 
pl) 一 ce， 
其 中 p00) 一 cp (0) 一 ca ,特别 车 p60) 一 1, 那么 p00 = e*, 其 
{i 


a = p07 = lm ET AO 
i rt 


由 此 我 们 联想 到 可 以 考虑 


lim 
例如 对 Poisson 过 程 ,这 一 极限 为 
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可 以 证 明 对 连续 参数 的 马 氏 链 ， - 般 当 jimPtn) 一 了 时 ,上 述 杖 限 


确实 有 意义 .其 确切 含意 是 ， 


Gy 





pr CD 4) 一 tim Put) - £0) lim A -Ag 
(5. 16) 
有 意义 ,其 中 

0 二 过 二 os 0 天 六， (5. 17) 
-0 (5.18) 

荫 月 jw 去 0, 即 

7 

8 A Dg (5.19) 


特别 地 ,若是 有 限 状态 的 马 氏 链 . 则 g, 全 部 有 限 .这 是 因为 


Qu = plo = lim 


BD 1 ud) 
5 一 lim 、， 7 


0 


和 号 中 -其 只 有 有 恨 项 ,因而 和 号 极限 可 交换 ,从 而 得 到 


gn 一 一 Dg, 六 一 oo， 


J 


0 = (@). 


和 矩 阵 Q 到 库 有 什么 概 举 意义 呢 ? 由 它 是 否 能 完全 决定 {PC)， 


1 六 0) 昵 ? 


首先 考虑 状态 空间 有 限 的 往 单 博 况 ( 设 共 六 个 状态 ) 由 (PP，) 


我 们 有 


pO = Jim et NT pli 
wa Ed 





mh 


4 





一 [im -- _ 
名。 1 


人 Petat) st 
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i po 
一 Pp (1) lim | 


> 
= DY) paul) gs. (5. 20) 
上 一 上 


务 一方 亿 
六 对 十 各) — p(t) 
六 





plty = lim 
A 


Spars) — BV putt) 





是 At 一 全 
= Vm PD eng, ty) 


= VY gipett). (5. 21) 


(5. 20) 与 (5.21) 的 寻 阵 形式 分 曾 为 
P'() = PUIQ (C5, 20)! 


Ly 


P() 一 人 Pt)， 《5. 21 
它们 分 别称 为 Kolmogorev 前 进 方 程 与 后 退 方 程 . 它们 是 连续 时 
合 蕊 氏 链 的 转移 阵 所 可 能 满足 的 最 重要 的 方程 , 为 了 确证 是 否 能 
由 避 求 出 PQ, 我 们 注意 (5. 20) 与 (5. 21) 都 是 关上 的 线性 微分 
方程 .它们 都 应 满足 初 娘 条 件 : 


pt0) = 6, PO) = DD, (5. 22) 
国 此 方程 (5. 207 与 (5. 21) 有 了 唯 : 解 . 令 

PP 人 GD) 一 ee A tO", (5. 23) 
上 式 右 端 极 数量 收 笋 的 ,事实 上 


QS ax, Sg, = max (— gq.) A go, 
i pe 1 过 :过 加 
目 妇 纲 法 易 见 ; (go7 的 任意 一 个 元 素 的 金 对 值 都 不 超过 qo" ,于 
起 由 
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-1 一 - 
> 一 en 二 se < ee 
ni 
请 


就 可 得 到 (5.23) 右 端 任 一 元 素 都 有 限 , 再 则 
rr rr 
DD D0 


(ee 一 一 人 
即 Ptt) 与 ee 同 是 55. 201( 或 65. 21)) 满 足 条 件 (5. 22) 的 唯 -- 解 、 
因而 
Pl) = eq- 《5. 24) 

这 正大 我 们 分 析 实 数 时 希望 有 的 事实 . 

我 们 称 人 如 为 {P(t} yt 宕 0) 的 转 称 速率 阵 . 简 称 伯 - 算 阵 . 

但 是 一般 来 讲 , 对 可 数 状态 巧 民 链 ;(5. 20) 与 (5. 21) 不 -一 定 成 
5 20) 在 (5.220 下 的 解 也 不 -一 定 唯 一 ,问题 可 以 十 分 复 困 , 附 
下 中 对 此 作 了 了 简单 介绍 . 


2，Q -矩阵 的 概率 意义 及 供 人 链 
对 于 -- 个 轨道 右 连续 的 马 氏 链 ( 即 P(wilim&(o) 一 &,(w) 一 


1 令 T(w) 一 infir 05(a) 天 名 (om ,这 里 riw) 是 和 Co) 的 首 
次 跳跃 时 间 , 我 们 有 下 面 的 定理 : 


定理 5. 1 若 # 的 轨道 右 连续 ,而 且 保 守 | 即 对 Yi 有 : yq 一 
ts Eh 三 十 oo, go, ee 0 由 而 


了 让 ce， 《5.25) 





2 PE = at (5. 26》 


3) P(E ~— j|& 一 门 一 机 (到 门 ， (5. 27) 
这 个 定理 的 意 轩 是 当 上 5 外 在 状态 i 的 条 件 下 ,人 它 继 续 留 在 i 的 
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时 间 是 指数 分 布 的 ,其 均值 (指数 密度 ) 为 . 涪 明 二 已 在 ;的 条 
件 下 ; 当 它 离开 ;时 跳 到 j 的 概率 是 gq,/9,， 而 1D) ,2) 与 3) 联系 起 
来 说 明志 与 + 关于 名 = 二 7 条 件 下 是 条 件 独立 的 两 个 随机 变 重 . 

这 个 定理 对 认识 忆 - 征 阵 的 概率 意义 很 有 帮助 ,但 是 它们 的 证 
明 比 较 繁 玉 , 我 们 把 它 略 去 .兴趣 的 读者 可 参看 附录 中 指出 的 文 
献 . 

直面 的 定理 可 以 帮助 我 们 进一步 认识 Q.- 短 降 的 概率 意义 ,在 
应 用 Q 过 程 解决 实际 问题 时 也 很 有 用 处 . 

定理 5. 2 ” 设 连 续 时 间 和 参数 马 氏 链 满足 定理 5. 1 的 条 件 ， 
全 mo) 进 的 第 上 次 跳 暑 时 间 . 严格 地 ,我 们 归纳 地 给 出 如 下 定 

toh) CO 有) 一 人 


tire) = inf {ff > tw) Cw) 天 S.Cw)}, 
记 
PD) = = 0,12,), 
则 ?会 {有 Cw);& 一 0411,…}) 是 一 个 与 有 同样 状态 空间 的 离散 时 
间 参 数 的 时 齐 马 氏 链 ,而 且 # 的 转移 矩阵 是 
P= (py), 
其 中 


0， 1 js 
pa 一 | ， i 天 (5. 28) 
证 示 
Pw (Ce) 一 了 Ce) 一 0) 一 ts No C0) = 
一 Pl ,cu (w) 一 J | cm (0) 一 1 
总， tad Ce ) Ce ;ce (Ww) 一 io) s+ {5. 29) 


其 中 :各 wl%) 一 天 = {ww) 在 mm(o) 以 后 首次 跳 牙 时 跳 到 
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状态 了 上 

类 似 王 $ 3.6 中 离散 时 间 马 氏 链 的 强 己 氏 性 ,这 里 对 轨道 而 
连续 的 连续 时 间 马 氏 链 ,我 们 也 有 强 马 氏 性 (证 明 类 拟 ) 因 而 
5. 29) 式 等 二 
上 式 最 后 的 等 呈正 性 (5.27) 的 结论 . 

以 上 讨论 说 时 12oy 要 一 De 的 戎 是 一 个 瑟 氏 链 , 而 
且 其 转移 阵 昨 天 Cp,,) , 技 中 

{g/g i 
PpP,; = io, i (5. 30) 

了 称 为 上 的 谈 人 链 . 它 表 征 了 在 各 状态 之 间 的 牙 迁 情况 . 若 
已 知 子 , 艾 基 道 gCvYE 状态 空间 7) ,就 不 仅 知道 了 怎样 在 状 
态 之 间 菊 迁 , 也 知道 了 在 每 个 状态 的 停留 时 间 的 分 布 . 也 就 是 说 我 
们 就 知道 了 的 运动 的 全 部 统计 规律 . 


8 5,3 几 个 重 杰 的 Q- 过 程 模型 


本 节 给 出 多 个 最 重要 的 Q- 过 程 的 特 策 ,它们 不 仅 对 读者 进 一 - 
步 认识 忆 过 程 的 统计 模式 及 特点 有 帮助 .而 且 对 读者 进一步 去 应 
用 外- 过程 也 很 有 启发 . 


1 连续 时 间 参 数 的 分 支 过 程 


届时 间 " 一 站 时 有 粒子 ,个 (X= 二 六 宇 1) :每 个 粒子 的 分 裂 

败 闻 是 “个 指数 分 布 的 随机 变量 上 ~ he “7 ,07) ,各 粒子 永远 莉 

由 与 独立 ,并 巧 完全 后 样 奖 型 的 粒 于 ,因而 其 分 型 的 概率 分 布 应 该 

相同 , 设 分 型 为 上 个 的 概率 是 fi(k 二 0,1,2,…). 今 X (Cw) 是 时 刻 

{ 总 共有 的 粒 手 数 , 下面 我 们 来 过 论 XCw) 变化 的 统计 规律 . 类 似 

i 芹 虑 Poisson 过 程 , 我 们 先 考查 六 一; 时 在 一 个 无 容 小 的 区 隔 
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P 小刀) 内 ,这 i 个 独立 的 粒子 中 有 两 个 以 上 粒子 分 列 的 概率 是 
二 项 分 布 ， 
Sl Ce MY) Kl ee *) = Oh’) = oh), (5.31) 


其 中 1 ew 与 e+ 分 别 是 一 个 粒子 在 [tt 十 访 ) 内 分 裂 与 不 分 型 的 
概率 . (5. 31) 表明 有 两 个 以 上 粒子 在 长 为 万 的 时 间 小 区 间 内 分 横 
的 鬼 率 只 有 od%) ,此 外 ,- -个 粒子 在 长 为 的 区 间 内 分 列 两 次 以 
上 的 概率 为 ， 

fe*aa 一 人 ed， 〈《5. 32) 


这 是 因为 设 第 -次 分 裂 的 时 间 是 在 {s,s 二 ds], 在 s 十 ds 之 后 至 少 
分 裂 一 次 的 概率 是 (1 一 e 5) 由 全 概率 公式 就 得 到 (5. 32), 容 
易 得 (5. 32? 的 如 下 近 做 估计 ， 

| MI — e au-ojds 一 | ea _ je-*[ ds 


一 1 一 ee 名 Me Bo Ah he rt | ochy 
= MA Coe t+ ok) = CRY oh) = ony, 
而 一 个 粒子 在 wt 十 hj 中 分 裂 一 次 的 概率 为 (1 一 oe 小) 十 oh)， 
由 此 可 网 在 忽略 "CA? 的 意义 下 ,我 们 只 需 考虑 在 [ty 十 坟 ) 中 只 
有 一 个 粒子 分 裂 -次 的 情形 ,而 其 他 情形 的 总 概率 不 过 是 oc)， 
于 是 
疡 (8 一 在 [wt 十 有 中 7 个 粒 于 全 不 分 弄 1X = 让 
十 忆 ( 在 [yt 十 有) 中 必 个 粒子 中 恰 有 一 个 粒子 分 理 
一 次 ,分 型 结果 仍 为 1 个 粒子 |X, 一 日 上 of 


Ei 十 {| (1i—e je)r-i +» 十 olh) 





ei ee tf ohml1— MARCIT Oo A) + oh) 
《请 记 住 产 = (一 个 粒子 在 分 裂 时 怡 分 裂 成 个 粒子 ) ). 即 


lp(h) ARO fF ody . 
五 lim 一 7 一 ”= iACti 一 万 











奖 似 地 .对 /六 工 二 我们 有 
eR) 二 (在 [41st 寺 直 ) 中 个 粒子 中 恰 有 个 粒 王 
分 烈 一 次 ;分 雏 成 7 一 i 十 1 个 |X 一 门 一 wth) 
-iiia 一 Be 二 


i ,i oh, 
从而 对 了 二 上 十 1 
gu im 名 iA 
最 后 、 对 j< 7 一 1 有) 一 oth); 对 j= 二 7- 1 有 
1 -六 ( 在 Lf + 中 恰 有 一 个 粒 于 分 裂 一 次， 
分 列 后 消沉 1X, 王 72) 二 och) 


-| :| (1 - ee vte “Yl + f+ oth) 














—iAhf, + olh), 


由 此 有 ge | lim ho to) 一 A 


此 外 :由 于 现在 粒子 数 博 定 的 条 件 下 ,将 来 的 分 型 情况 与 过 去 
独立 ,这 个 分 枝 过 程 是 一 个 马 氏 过 程 , 由 上 面 的 计算 结果 知道 , 它 
的 转移 速率 阵 (Q- 和 矩阵) 是 久 二 (9 其 中 


[Ah, it— 1; 
QO— A i (5, 33) 
- iAf i i 十 15 

[0, jl 


2. 连续 参数 的 二 分 梳 过 程 与 生 灭 过 程 


设 在 上 - - 段 的 连续 时 间 参 数 分 支 过 程 中 ,每 个 粒子 分 型 只 能 
有 死亡 ,保持 - :个 或 分 型 成 丁 个 二 种 情形 , 即 广 十 方 十 彤 一 1 这 
好 可以 理解 为 一 【Xst 宇 人 0 是 一 个 在 0 有 慌 收 鉴 的 生 天 过 程 ， 
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它 的 转 称 概率 速率 阵 旬 一 (gq,) 是 : 


DO ft 一 人; 

15 六， 了 一 一 11 
ga 一 131 
1 -Al 一 所)， 了 一 rm21; 

0， 其 他 ， 


更 一 般 的 后天 过 程 是 指 - -个 马 氏 链 , 其 转移 速 举 阵 为 Q 二 
(C0,,) ;寺中 


儿 ， 了 一 了 一 1 
js ] 二 -7 - 1s 
gq, = 4 ” | 《5. 34) 
一 (4 十 后 )， 了 一 了 
0， 其 他 ， 


生 灭 过 程 相当 于 连续 时 间 参 数 的 随机 徘徊 :每 次 可 向 前 一 步 
或 向 后 跳 - 步 ,分 别 以 474 十 26) 与 AAA 十 六) 的 概率 从 状态 
i 向 前 与 向 后 跳 . 从 状态 i 出 发 到 起 跳 的 时 间 服 从 均 慎 为 (% 十 
&) ! 的 指数 分 布 ,而 和 且 过 程 的 号 迁 与 它 在 哮 迁 前 所 在 状态 停留 的 
时 间 独 立 . 

这 里 ,从 一 个 状态 了 遇 发 到 起 跳 的 时 间 服 从 指数 分 布 这 -~- 特 
性 是 过 程 马 氏 性 的 保证 . 假若 不 然 , 已 经 知道 过 程 现 在 (时 刻 1) 状 
态 i 的 条 件 下 ,过 程 还 要 经 多 长 时 间 会 起 跳 的 概率 分 布 就 要 依赖 
过 程 在 上 之 前 已 经 在 ! 停留 了 多 扩 ,过 程 也 就 不 再 有 马 氏 性 . 起 跳 
时 间 服 从 指数 分 布 时 能 得 到 马 氏 性 的 实质 原因 是 : 若 z 服 愉 指数 
分 布 (~- he *)， 风 

有 了) 
| Ae "de dt 
= 于 一 ce ”~ Plwrt). 
f Ae “du ° 


这 就 意味 着 当 起 跳 时 间 服 从 指数 分 布 时 ,过 程 现在 处 于 某 状 态 ,此 
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_ Plw:rtw) 次 上 十 5) 
Plw:rTtw) > 5) 














本 经 多 入 从 该 状态 路 迁 到 其 他 状态 的 分 布 是 了 过 程 己 在 此 状态 个 
刘 多 入 独立 的 , 轩 而 只 要 过 程 跃 迁 的 分 布 与 过 去 独立 ,就 能 保证 过 
程 其 有 乌 氏 性 . 

3.N 个 服务 员 的 排队 系统 模型 CM/ MN 排队 模型 的 排队 过 程 ) 


茶 一 个 服务 系统 及 个 服 血 贡 ,上 其 颐 寿 到 米 的 规律 是 一 个 以 
a 为 半 均 人 审 度 的 Poisson 这 种. 每 位 胶 窒 可 由 入 个 服务 员 中 人 一 
个 不 正在 服务 的 服务 员 接 待 . 用 X, 表示 时 证 上 时 等 待 服务 与 正 接 
受 服 务 的 订 有 顾客 的 总 大 数 , 过 程 革 称 为 排队 过 程 . 另 … 方 面 , 当 
大于 太 时 就 有 四 ,一 N 个 下 容 在 等 待 .而 久 小 于 入 时 新 到 的 鼎 
窜 就 立即 接受 服务 . 又 设 每 位 顾客 的 服务 时 间 ( 从 他 开始 到 苇 空 着 
的 服务 员 处 接受 服务 起 计 至 他 离开 该 服务 员 为 止 ) 服从 参数 为 六 
的 指数 分 布 , 并 日 不 同 商 客 的 服务 时 间 相 下 独立 ,还 与 顾客 到 来 的 
情况 独立 . 这 时 :Xf 宇 0} 是 -个 与 还 链 ,因为 在 ,二 站 说 明 时 刻 
t 有 : 个 顾客 在 接受 服务 或 等 待 ) 的 条 件 下 ,XX,. ,一 ;就 是 在 [i,t + 
5) 中 有 不 个 顾客 到 来 ,有 个 颐 客 结 束 服务 (j 二 i 十 记 一 + 这 苦于 
都 与 :之 前 的 顾客 情况 独立 ,也 不 依赖 z. 直面 我 们 来 应 这 个 时 齐 
蕊 氏 链 的 Q- 矩阵 , 即 考 查 
PlwXistw) = R=i) (一 十 下 一 让) 

注意 到 ,; 当 之 1 时 

下 (站 [十 页) 中 有 其 个 以 上 顾客 和 来 ) 一 och)， 

Plw: 在 [tt 十 有 ) 中 有 两 个 以 上 顾客 结束 服务 = 6 )， 

六 (外; 在 [st 十 胡 ) 中 同时 有 个 顾客 到 来 ， 叉 有 一 个 顾客 结束 服务 

一 人 1 一 e "(le *) 

= Ca CBAY + ok) = of 
我 们 只 要 考虑 以 下 三 种 情况 [rr 十 户 ) 中 有 一 顾客 到 来 , 担 无 到 
客 结束 服务 ;有 - “顾客 结束 服务 .但 无 顾客 到 来 ;两 考 此 元 ,它们 分 
别 与 p18) 1 记 ,1(h) 与 ph) 只 相差 ofh)， 令 7! 表示 上 时刻 正 
在 接受 服务 的 顾客 个 数 ,于 是 
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一 AN 
Pichy 一 ee 人 十 ofi 一 一 (0a 十 BR oth), 
六 一 人 一 ee 二) 





ph) = ， em(l ew) + olh) = LBh 十 oj， 
因而 对 i,j 宇 0 
{i A NB, j=i7?i 一 li 守 ]1; 
上 (e+ (AND), 了 一 了 
jo, ji 十 14 
0, 其 他 . 





《5. 35) 
容易 看 出 在 这 个 服务 模型 中 ,排队 过 程 {1%sts0} 是 上 段 中 的 
一 般 华 淡 过 程 的 一 个 特例 ， 
A= ANA k=a (= 01,). 
可 以 证 明 这 里 的 @ 王 (95) 能 唯一 决定 一 个 QQ- 过 程 满 足 Kol- 
mogorov 前 进 方 程 与 后 退 方程 ,并 具有 右 连 绕 轨 道 ( 参 见 附录 ). 


4 Ising 模型 及 其 Glauber 动力 学 


Ising 模型 是 统计 力学 中 最 有 具 上 典型 意义 的 模型 , 它 在 物理 ,化 
学 ,生物 等 许多 领域 中 都 有 应 用 与 代表 性 . 这 里 我 们 先 简单 地 介绍 
有 限 格 点 的 Ising 模型 . 记 7 = {1,2,…,N}. 

设 1*(4 实 1) 是 每 边 为 NN 个 格 点 的 d- 维 方块 中 的 全 部 格 点 
集 . 每 个 格 点 上 有 一 -个 粒子 , 它 可 以 处 子 十 1 与 一 1 两 种 { 自 话 ) 状 
态 , 于 是 整个 -Ar 个 粒子 组 成 的 系统 全 部 可 能 的 状态 集 是 {一 1 ,十 
i), 将 它 记 为 7, 郧 

= {= WE E A gr) EE {— 1,1}}, 

对 FES7, 称 为 一 个 组 灾 . 

设 系统 在 无 穷 小 的 时 间 区 间 [zyi 十 (8 二 过 1) 中 有 两 个 或 
两 个 以 上 格 点 改变 状态 的 和 构 率 是 oth)， 系统 运动 的 统计 规律 由 下 
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而 的 胡 站 作用 能 二 决定 : 当 系统 处 于 状态 3E {一 1. 二 11 ”时 ,入 
了 系统 对 于 在 将 点 rE 刀 的 往 子 的 * 相 下 作用 能 基 ” 为 


HD) -一 了 > DT) hE 05,30) 
a 

其 中 下 yy 一 2 = 六 1s 2 六 印 第 - 和 号 取 禹 一 切 相 邻 的 格 
1 





点 对 Cr) :所 良 了 与 > 相 乔 足 指 畏 可 工 与 4 的 红 个 坐标 中 有 县 
只 有 一 个 坐标 不 同 . 而 系统 从 ?在 无穷 小 时 间 产 内 变 为 久 ( 六 参 将 
7 中 溉 为 一 F(x) 的 组 态 ) 的 转移 概率 速 康 由 下 式 定义 
exXPE tH 7) (Nn))) 
一 exbl 一 前 > FY 1, 


| 


此 中 站 是 倒 渴 度 参 数 , 即 它 是 绝对 温度 的 倒数 . 由 此 识 定 的 所 -过 
程 就 赴 这 个 有 限 格 点 上 的 Ising 模型 的 Glauber 动力 这 .在 六 5 5 
中 ,我 们 将 看 到 当 上 如 二 0 时 这 个 人 @: 过 程 妥 本 道生 稳 分 布 1at7 :9 
< {一 1 十 19 和 ;这 个 分 布 六 岂 做 这 个 折 奈 作用 粒子 条 统 的 
Gibbs 分 布 , 它 与 expiBAG9) 成 比例 . 








5.4 QQ- 过 程 的 极限 行为 





本 节 中 我 们 研究 Q- 过 程 的 极限 行为 . 为 简单 起 见 .我 们 这 里 
只 讨论 保守 的 | 即 会 一 g = lg,] 轨道 右 连 续 的 情形 ,因为 


对 这 类 过 程 定理 5. 1 与 定理 5.2 已 经 对 它们 在 各 状态 的 停留 与 妈 
迁 的 统计 特征 用 Q_ 目 阵 给 出 了 清晰 的 描述 


1. 常 返 、 非 常 返 与 状态 分 类 








在 有 42 中 ,我 们 在 定义 3.4 中 给 出 的 户 散 时 间 蕊 区 链 常 返 
的 定 多 .对 罕 义 3,1 稍 加 修改 就 适用 于 连续 时 间 参数 相应 的 情况 ， 
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定义 5.4 起 开 链 二 全 信 Ce) yf 之 0) 的 状态 站 称 常 运 ,如 果 
P(tw;$tw) 刘 达 又 离开 : 无穷 多 次 ) 二 1; 
状态 了 称 为 等 态 , 如 果 
Postcow) 到 达 又 离开 无穷 多 次 ) = 0. 
出 于 在 $$ 发 生 无 窍 多 次 跳跃 前 ,在 状态 之 间 浇 迁 的 情况 与 
共 了 谨 入 链 7 是 -- 样 的 ,只 要 在 有 限时 间 内 不 会 发 生 无 穷 多 次 跳 
路 ,就 保证 < 与 7 的 常 运 性 与 互通 性 相同 . 在 本 章 的 附录 中 我 们 将 
注 虹 当 g, 有 界 ; 邮 4 守 ctY 时 ,二 在 有 限时 间 内 慨 率 为 1 地 不 会 
发 牛 无 穿 多 次 跳 获 . 这 样 -来 ,的 常 返 性 就 可 用 
P= (Cp,,) — gutl OO— 6,) /97) 
及 P ,由 $3.2 中 有 关 的 定理 来 认识 .特别 地 ,若是 有 限 状态 迷 


续 参 数 的 蕊 下 链 ,(g,,) = 是 孔道 的 矩阵 , 即 PP 是 互通 的 ,那么 & 
也 二 一 个 互通 常 运 的 马 氏 链 . 

例 5 2 {M/AM/AN 排队 过 程 的 常 返 性 ) 

在 85.3.3 中 引入 的 M/MIN 和 排队 过 程 的 和 @- 扎 阵 由 (5. 35) 
式 给 出 








(i A MB, j=i— lil1; 
，- -EAMND, 了 一 让 0 

Gy j=i 二 li 0; 

0， 其 他 . 


由 于 9 委 9 一 2 十 性 ANIB 二 十 NpG 天 门 ,可 见 站 下 
是 满足 上 面 讲 到 的 g 闫 于 i 有 界 的 条 件 的. 于 是 (ww) 在 有 限时 间 
只 能 跳跃 有 限 次 ,从 而 多 的 互通 性 与 常 返 性 与 其 个 入 链 相间 .六 
的 候 入 链 的 转移 阵 是 


(A Np , , ， 
Ee j=i—1i 守 1! 





Pr 一 





四 四 四 
a tRNA’ 了 一 [十 1 之 人 
0，, 其 他 ， 





容 努 看 出 下 是 互通 的 :而 唱 在 袜 六 时 , 疡 一， i 
Ny ， 网 罗 交 os 
Pp, A 它 间 向 有 概率 为 。，Nr3 与 向 在 概 党 为 


2 的 评 次 随机 徘 制 完全 相同 .上 是 从 六 宇 入 出 发 着 a > NN 


站 NN 


则 已 对 应 的 肛 六 链 了 有 正 概率 从 ， 向 右 走 永 在 加 到 ， “ 串 和 册子 这 时 
目 常 返 (和 态 .时 而 才 也 卡 常 返 . 当 a 二 N3 时 ,从 出 发 向 有 走 ， 
在 有 限时 间 内 7 以 概率 为 1 的 辐 到 着 而 从 :向 帮 走 只 在 (0.1， 
上 有 限 个 状态 ,如 果 在 说 :个 吸收 监 ,这 时 这 个 己 氨 链 是 一 个 总 
其 十 1 个 状态 :有限 状态 ) 焉 通 的 以 地 为 吸收 艾 的 马 氏 链 , 它 应 以 
概 次 为 1 地 在 有 限时 间 到 ,可见 马 氏 链 了 是 常 返 的 ,从 而 无 也 是 
带 返 的 . 
例 s.3 (空间 齐 深 的 单 边 生 灭 过 得 的 常 返 柱 ) 
大 虑 一 种 特殊 的 生火 过 程 , 设 二 的 只- 秆 阵 是 息 二 tg,) , 共 中 




















在 j= i 一 1 ]， 
上 5 一 十 1 六 0 
4y 一 (0 dp 十 00). 


| arm i 二 ji 站 1. 
A， 1 
这 种 情况 下 :由 例 5.2 我 们 也 可 知道 二 在 有 限时 间 民 则 只 跳跃 有 
限 次 ' 从 而 与 其 能 入 链 了 有 相 问 的 于 通 性 与 常 返 性 . 由 于 





i pe _ os 
EE Ji li]， 
1 .4 . 
大, 一 了 2 了 一 了 十 1.7 六 0 oy 
1 一 0 一 1， 
其 他 ， 
这 时 仍 入 链 了 恰 为 点 有 芭 射 对 日 以 p =- x 4 
Tf 十 天 
删 光 操 看 年 向 左 概率 的 简单 随机 徘徊 . 可 风 当 p24 时 二 非常 返 避 


KE 人 带 返 . 





又 若是 在 整个 Z( 一 维 整 客 点 ) 上 的 空间 齐 次 生 淡 过 程 , 则 
与 上 而 的 讨论 类 似 我 们 可 以 得 到 当 4 考 记 时 ,非常 运 ; 当 4 二 jp 
时 ,党 返 . 
2. 心 -过 程 转 移 阵 的 禄 限 

为 回避 比较 深入 的 概率 论 与 测度 论 的 问题 ,我 们 本 段 中 的 
推导 仅 限 于 有 限 状态 CR 个 状态 ) 欧 Q- 过 程 , 但 其 结论 全 对 g, = 
> 生 对 1 有 界 的 可 数 状态 的 情形 也 适用 . 

由 于- 





af 全 一] 
它 机 一 人 站， 二 gq > 0, 


人 
训 园 当 充分 小 p66) 之 0 ,内 此 对 充分 小 的 608 之 6 (p,0n0)) 
一 定 是 非 周 期 的 . 设 (9,,7g.) 是 瑟 通 的 ,我 们 就 有 (p,(6)) 也 是 互 
通 的 43 充分 小 ). 于 是 对 国宝 的 人 > 扩充 分 小 ) 
limp,,(nd) 一 玫 ， (C5, 38) 
而 且 对 Y¥ 0 < 之 之, 充分 小 有 
m= limp,n6s) = limp,ln(d, — 8,) + 8) 


Ny 
= lim 2 palnld, — 61)) ps (nd,) 


9 
一 - 六 mint ($; 一 $, — 6,) 
£- | 


一 mi 
因此 只 要 3 充分 小 (一 页) ,(5.38) 中 的 极限 与 全 无 闫 , 即 
limp, (nd) = x, (YH). 
义 由 于 任 给 8 这 0, 训 守 0 ,使 8 过 人 时 ,对 Yj 
[p60) 一 全 | 二 1 一 入 (6) 二 sy/2， 
于 是 
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Mii AS 113 人 |e 
Ptfy - ,i 6 61| < . | | 人 | 六 个) 让 | 2 €E 
i 可 
1 ri ' 
mp ti) 一 XX, BD Pe) In. Cn. 38Y 


这 就 说 时 开通 的 外 过 程 的 转移 概 举 阵 的 极 盆 存 主 , 听 入 是 一 个 各 
和 都 相同 的 此 阵 . 
此 外 .对 YY 人 ， 易 见 
、 Tp) 一 >») limp,, (3) pr tr) = = linpe tt 二 5) 一,. 
将 上 式 写成 于 阵 形式 就 是 
TP} 
计生 有 
T=] ( 即 71 一 1). 
即 具 有 这 梯 的 特点 :以 它 为 初 分 布 .在 任何 时 收 的 分 布 者 
仍 净 直 . 
定 必 5,5 设 分 布 工 使 得 对 Yi 宇 0 有 
TP(GD) = NH, TEL- 1， 
划 称 工 是 P(t) ;i 关上 0) (或) 的 (平稳 ) 不 塞 分 布 . 
(5. 38 六 中 给 出 的 夏 正 是 - :个 平稳 不 变 分 布 . 由 于 清 常 对 Q- 
过 程 我 们 并 不 知道 {PC)3t 写 07} 是 什么 ,而 真正 知道 的 是 转移 密 
度 (速率 } 阵 (8 一 (9,3) ,所 以 我 们 应 设法 用 名 来 刻画 普 . 事实 上 ， 
由 (5. 88) 我 们 有 




















im Dr 0 
即 Dng,=0 (Yj), 


共生 阵 形式 为 
7 了 7 





T 人 一 全， FL 一 上 《3 


村 攻 在 外 是 交通 时 , 赴 65. 38) 的 瞧 “ 租 .区 由 二 生生 车 通 峙 ， 





浇 入 久居 开通 的 . 国 此 下 面 的 方程 


FP Tr. ml 一 1 


三 唯 一 解 . 基 


> Th A Tl 1, 


出 即 
A, = 元 /GZ (5. 39) 
其 中 久 是 妆 一 化 常数 


Z= Nr/g = {| Dgr} 


(5. 39) 式 可 有 如 下 的 概率 解释 : x, 是 在 状态 : 停留 的 平均 频率 ， 
它 与 颈 和 人 链 ? 在 : 状态 的 平均 停留 次 数 及 平均 停留 的 时 间 成 比例 
对 常 返 的 情形 ,与 离散 时 间 的 强大 数 律 L$ 3.4) 类 似 ,连续 时 
间 秦 数 的 马 氏 链 也 有 强大 数 律 . 下 面 我 们 来 推导 它 . 令 
DCw)} 一 0， 
So = inf(f > Em E(w) 天 站， 
mtw) = inf{t > So) E(w) = 17}, 
即 titw) 是 第 次 达 i 的 时 间 , 由 常 返 性 已 (mo 之 o0) 一 1. 由 
强 马 氏 性 与 $3.4 中 所 作 类 似 的 讨论 ,我 们 就 有 如 Cw) (ao ，… 
是 同 分 布 的 停 时 询 , 而 且 Cw) 以 后 的 与 在 忒 (w) 之 前 发 生 的 
事 独 立 , 进而 ,由 每 一个 页 (tw) 出 发 考虑 二 : 即 考察 过 程 人 
之 0}， 不 难得 到 它们 也 都 是 同 分 布 的 . 这 样 194(e) 一 (Cw) ;一 
2 与 和 C0) 一 二 (法 二 1,2) 分 别 都 是 i.id. 序列 
从 而 以 概率 1 地 有 
178 





; I vi 号 一 en) Ein tewy Ta) ) 
lin » ee 太吉 ， 


一 天 FF luy.. 
丝 中 remw) 其 二 首 深 跳 牙 的 时 间 , 男人 一 方面 :还 有 有 


lirr em) -lim ! 和 ， Crey Ce 一 TO 
a nl | 
与 人 3.4 我 们 所 作 过 的 类 似 : 我 们 可 以 得 到 

lini 二 | 1 (dr (下 


站 
rw) 


习 一 方面 .将 二 式 得 到 的 数学 期 并 与 (5. 397 比 较 得 名 
E, 二 | 1 ， (5 )dz| 一 ;| pul)du 1 zr), 


Er 


兵 中 Z— May,. 
1 i _ 
全 是 左 并 的 极限 六 应 为 DE Cw PB rw) =: ZR, 即 
Dee or 5,40) 


I 天 广 、 我 们 总 ,区 三 早出 以 - 六 定 
定理 5.3 设 半 是- -个 本 通 此 过 的 过 程 ,满足 村 Wi, g, 二 


24 全 9, 且 9 有 界 .出 
对 任意 状态 二 j 
lim | Go3ds 一 区 (5.41) 
(2) 和 下 直人 状态 让， 
之 和 一 1: 5.42) 
(3) 二 Cr) 是 如 下 方程 的 唯 -: 解 . 
179 





' (5.43) 


4) T= Rg ZIT, 一 2 ， 而 有 是 
”1 





-- 一 1 1 


即 二 是 挟 的 嵌入 链 了 的 平稳 不 变 分 布 ,r 与 从 i 加 到 i 平均 所 项 


中 弃 时 间 EriCw) 上 成 友 比 ， 
(5) 车 了 是 状态 空间 上 的 有 界 实 前 数 , 则 
tim Tf fan = Df) (5. 44) 


例 5.4 在 上 段 的 例 5.2 中 , 当 a < 过 和 N8 时 ,排队 过 程 的 平稳 
不 变 分 布 是 二 a&/2, ,其 中 





a 1 , 
“BY A DIN mn Li oe 
证 明 对 (5.35) 中 的 8 解 方 程 组 (5.43) 得 


| x = om (an 一 1)7， 
1 No a 
AX, 一 2 x 二 Ata t+ 8)) = 68 再 3 Rod ， 








1 N+] 
We RN， 
fa 1 
"= "|B) Nin = me (>N) 


因此 当 NB > a 时 有 
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7 ( 当 NB>e 时 有 2 区 二 


TF | am 








1 1 i | 
| 六 | 了 A NIMN nm (ft l:2. 汪 : 
又 由 5. 40) 与 (5. 39) 我 们 此 时 有 

















Ertw— A A 一 二 一 L100, 


-| NA DLN MZ /a tN ADB). 
进而 还 可 得 到 稳 态 下 ( 即 以 地 为 初 分 布 ) 的 平均 队长 志 为 : 


了 一 en 
特别 当 N= 二 1 时 有 


3 | 
这 是 因为 N 二 1 时 ,一 | B: 























$$ (1 到 | 
即 平稳 分 布 为 参数 1 一 万 的 几何 分 布 . 所 以 
3a ew .| 1 B 
2 Billi | 2 F| ， a 1 
ai olid' 1 区 G 1 人 
= Fl1 一 万 | 训 | 了 | ,= B11 B)l! 可 | 
四 





BAea Poe 
进而 我 们 记 可 以 计算 以 让 商 种 平稳 等 待 时 间 ( 指 从 到 达 开 始 
到 接 党 服务 的 时 间 ): 
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(1) 企 忆 经 "达到 ”于 稳 ( 即 部分 大 } 的 特定 时 刻 1 来 到 平稳 排 
队 系 统 的 硫 客 的 平均 等 待 时 间 ， 

由 于 棒 队 系统 平稳 ,对 于 在 系统 中 的 虹 客 (包括 在 排队 的 与 赴 
在 接 受 服务 的 磊 客 } 数 X, 有 ; 
PlwXR CO— il= xX,, 
记 上 时 刘 :来 到 的 硕 客 等 待 时 间 为 灵 , 下 是 

六 0 一 1 时)， 

而 当 7s 六 时 ,此 顾 帘 的 等 待 时 间 恰 为 后 第 /天 十 ] 个 顾客 离 
并 的 有 时间 (因为 这 之 前 六 个“ 服务员” 部 一 到 不 停 地 为 那 前 面 的 7 
一 六 上 1 个 顾客 中 的 入 个 服务 ,而 当 第 i -NN 十 工 个 顾客 结束 服 
务 离 并. 闪 个 “服务 员 * 中 恰 育 一 个 空 出 来 为 时 刻 :到 来 那个 顾客 
服务 ), 青 信 意 到 各 顾客 与 服务 员 的 服务 时 间 相 豆 独 立 , 若 记 第 天 
个 顾客 离 六 的 时 间 为 6 十 (不 秋 一 般 性 ,可 没 1 = 一 0) 则 当 i 守 入 
时 














六 (0 宇 引 一 Cw:N 个 服务员” 无 一 在 * 前 结束 服务 ) 

一 | Be Pape ts du du ndaun 

= (eM) = ee Me, 
可 见 @ 遵从 NB 为 参数 的 指数 分 布 , 又 蒋 二 > 入 十 1 ,在 第 一 .个 顾 
窜 结 束 服务 后 , N 个 “服务 员 * 备 自 短 要 多 少时 间 结 束 手 头 服务 与 
这 以 前 的 情况 独立 ,而 有 吕 仍 相互 独 立 亲 从 六 为 参数 的 指数 分 布 , 即 
i > 和 十 中 -一 1 HT ,os | 0 + 都 相互 
独立 同 指数 分 布 ;因而 应 遵 兴 (4,NB) 分 布 参数 为 上 与 WA 
的 卫 分 布 ): 

Po:a(o) > = | NB SBE mds 


= Plwg{w) 5) 
(参见 习题 ) 最 后 由 于 原 有 : 人 排队 加 上 在 时 间 ， 时 新 来 的 顾客 1 
人 人 共 i 十 1 人. 除 在 被 服务 的 入 人 外 ,需要 等 待 i 十 1 一 和 N 次 服务 ， 
182 - 





呈 汪 我 让 下 训 : 


te ，， Mad rir 加 
1 ~ 、 NY 
i ey WN 四 
- | Nd Ry ti LT 人 


NT ~ CA i AN (NE NT | ' 








RA 一 让! 一 kl Mg! 
3 ‘a 1 
Ft Ey > | Na = i 
pa ， (3 
| 1 1 
党 等 待 的 概 六 为 : PV 这 中 王 刺 | | ， 9 等待 时 间 为 
\ 8 
EW — 十 PEW Ow) 2 s)ds 一 ji -一 一 一 Na ords 
1 NB 
1 . 1 so 
> a NB 加 (NB 一 
NB 


特别 当 N=- 1 ( 即 只 有 一 条 服务 线 时 , x, 一 gl 一 本 ya 
时 我们 有 有 


7 0 1 
EW Be 


(2) 让 0) 中 求 出 的 平均 等 待 时 间 假 投了 顾客 恰 妊 在 柴 - - 特 
害 时 刻 + 到 来 , 这 似乎 很 不 合理 . 事实 上 ,我 们 直下 希望 知 说 的 等 
待 时 间 诺 为 某 -已 * 达 到 ?平稳 (充分 大 ) 的 时 刻 上 开始 后 第 -- 个 顾 
客 到 达 起 这 个 顾客 开始 接受 服务 为 止 的 这 段 时 间 . 分 析 与 在 (4) 中 
的 计算 的 不 何 之 处 是 ;在 现在 的 计算 中 应 该 用 P(X, = 上 1) 代 
蔡 人 中 的 z+, {不 辕 在 于 :o 是 随机 时 间 , 并 且 多 加 了 此 新 来 顾客 1 
信人 ) ,其 中 o 丰 ? 以 后 第 -个 顾客 到 达 的 时 间 ( 凡 下水 妨 没 1 0 7). 
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但 是 

关 ( 和 一 了 十 1 一? 
注意 到 e (w) 必须 是 下 (ww) 的 中 路 时间: 我们 考虑 占 入 链 X,cw) 一 
和 eof) 5 具 中 me) 是 下 (tw) 的 第 次 内 牙 时 间 ). 对 于 了 六， 
在 平稳 状态 下 我 们 有 
天 (oo 一 二 1) 一 了 PP(ase (oo) 一 (om) ， XCw) 二 了 十 1) 


一 >) Po. Kw) = Ri 1， 


和 to) 一 X, io 十 1 一 了 十 了)， 
由 于 假定 :时 已 达到 平稳 ,所 以 
x, A PUN: Cw) 二 了 十 1) 


一 TP eeP yyP (这 里 令 一 二 站 


注意 到 了 的 订 逆 平稳 分 布 为 元 , 而 让 (5. 39) 有 


T= 区， Tt pia— Kp. 


再 注意 列 对 于 7 这 入 有 g, 一 gx, 从 而 有 天 记 一 到 六 所 以 上 式 可 
改写 为 ， 

六 PP P, Ee io Pj, a Py * 

注意 当 了 2 N 时 忆 一 ZF NB 与 i 夸 美 ,上 式 和 屿 下 ;i 项 为 


一 
G 十 入 ’ 


Tt 
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没 在 (2) 的 模型 下 的 等 待 时间 为 W , 则 类 似 上 (1) 有 





Pw fr ~ #5) 一 ~ xr, ,ao nwy ss) 
1 
SS 
| k1 


py 8) re 
= RoW > rp ) 





这 里 ， 一 ry. 于 总 在 这 模型 下 不 圳 要 等 待 的 概率 为 
1 PW 0 — 1 rPW 0), 


可 见 EW < EW. 





中 县 FEW- rEW ~-r NB a 
当 a 一 ww 时 .有 常 返 , 但 是 2 = 十 二 ,所 以 此 时 没有 和 为 有 
限 的 不 变 分 布 ,这 时 是 零 常 返 的 ;而 当 a .> NB 时 ,是 非常 返 
的 . 在 这 两 种 情形 下 排队 过 程 者 不 会 达到 下 稳 ， 
例 5.5 在 0 点 有 反射 壁 的 宕 间 章 次 的 生 灭 过 程 ,其 慨 率 转移 














人 j=i+t 1 0 
gq _ J), 了 一 了 一 lt]; 
+2 i= hil 

i -a := 一心， 

督察 的 该 入 链 9. 它 的 转移 阵 为 

i 站 - ， . 

i 77Titii>0; 
一 1， 了 一 1 一 个 ; 

由， 一 1 





rm 了 一 一 1 
90, 其 他 情形 . 

由 第 - 章 结果 可 以 知 到 A 六 4 时 疡 是 常 返 的 ,特别 当 疡 二 时 请 下 
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常 返 ,这 时 有 唯一 的 平稳 不 变 分 布 ; 
a 
| 

出 于 9, 一 六 十 上 与 7 无 美 我 们 就 得 齐 ， 


ft, = XA,, 


$5.5 对 称 Q- 过 程 


1. 对 称心- 过 程 与 可 道 平 稳 Q- 过 程 

正如 离散 参数 马 氏 链 一 样 ,由 于 对 称 铝 -过程 具有 一 些 非常 好 
的 性 质 , 使 用 起 来 方 便 , 它 是 急 - 过 程 最 重要 的 特例 之 -… 

定 闵 5.6 设 # 是 一 个 以 为 状态 空间 ,以 入 一 (gq) 为 转移 
速率 阵 的 -过程 . 称 上 为 外 对 称 的 ,如 果 存 在 一 行 下 多 为 0 的 非 
负 实数 pr 台 {pi EE 51 使 对 ¥Yi 关 jE ce ,有 

A = Hn (5,.45) 
这 时 称 pg 为 Q@ 的 对 称 化 数列 或 配 称 列 ( 也 有 作者 称 为 对 称 化 分 
布 ). 

我 们 的 第 -个 间 题 是 为 Q@ 对 称 与 其 Q 对 称 化 数列 与 的 
转移 概率 阵 有 何 关系 ?特别 当 w 是 一 个 概率 分 布 的 时 候 ,以 声 为 宁 
分 布 是 否 能 得 到 上 是 一 个 可 道 平 稳 过 程 ? 

定理 5.4 没 # 是 有 限 状 态 的 Q@- 过 程 ,其 转移 概率 阵 族 为 
{PD5t 之 0} , 则 $$ 是 @ 对 称 的 时 QQ 以 为 对 称 化 分 布 当 且 仅 当 
是 以 为 对 称 化 数列 的 对 称 QQ- 过 程 , 即 对 Yi 关 jE ,及 1 这 
0 有 

MPstt) = pop,lt). £5. 46) 

类 似 于 离散 参数 的 情况 ,这 时 才 可 归 - 化 为 一 个 概率 分 布 " 
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> 以 昌 为 初 分 布 愉 变 为 “个 可 道 的 
平稳 过 程 4. 即 对 YT 了 守 0 及 Yt 守卫, 展 ， 之 0 有 
人 (5.47) 


柯 


人 (5.48) 
BE ETO.T E10,T71}，- 般 地 用 & 二 7 表示 二 与 了 同 
分 布 . 
证 明 “1) 上 攻 g 满 足 (5,46), 即 对 1 郑 j 

Rpt) 一 

于 是 在 等 式 两 过 长 :一 0 的 有 导数 就 得 到 
dy — He 

友之 , 蔡 (5.45) 成 立 , 人 入 于 








potty 一 >») 二 CD) 


N= 


为 了 证 明 6. 46) 我 们 只 要 和 证明 对 wm 及 


Ea 0 
“| 
MA 1 《5. 49) 
| 
j 


10 ', 
恒 有 MQ"=Q"M. (5, 50) 
事实 上 ,由 (5. 45) 利 用 归纳 法 就 立即 得 到 (5. 50). 从 而 (5. 46) 成 
让, 进而 , 苦 令 
Pilwé to) = = (EY), 





全 苦 (5.47) 对 二 ents 与 ,50 城 立 就 称 芋 是- -个 平稳 过 程 .意思 旺 
it 之 人 0 的 任何 友 限 维 分 布 在 时 间 推 移 下 不 变 . 车 (5. 48) 对 坟 .…ts 沁 开 威 站 
就 说 明 特 二 交 时 间 合 过 来 已 的 统计 性 质 不 变 . 
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Pia) = = 人 Hp 一 Dp ph, 
即 & 是 $Cw) 的 分 布 不 变 . 于 是 对 Yi 二 和 机 人 了 之 0， 
有 
Plw:é, Cw) = B16 C0) 一 (0) = 1,) 


= Dp po CDPolte — tp olin — ts 1) 


= 外 让 
= PO = pt p(t 1) 
= 及 (of = 有) 一) 一) 
而 且 由 (5.46》 上 式 还 等 于 
Brn te — OF Pi ty — ta pe tta ~ fat) 
= pens Hp ls 一 下 
= po bs — HD pts top Pi th 1) 
= pon fe 一 FOP ts — to) pe ts — te 
= pr fp bts — i) 
= Plwsér, 一 和 
一 了 (名 ,一 str = i = ). 
可 见 {全 :t 宇 0} 是 平稳 的 (满足 (5. 47)) ,而 且 满 足 (5. 48). 
对 可 数 状 态 已 -过 程 定理 5.5 并 不 能 一 般 地 成 立 , 但 在 一 些 特 
殊 傅 形 下 仍 有 类 似 结果 ， 
定理 5.4 设 # 是 一 个 可 数 状 态 Q- 过 程 ,其 Q- 阜 阵 是 互通 
的 < 即 嵌入 链 互 道 ), 又 车 有 非 恒 零 非 负 数列 满足 (5. 45), 旦 外 是 


保守 的 { 即 包 会 - gq. = qs) 并 有 
了 ,mg 二 十 oo， 《5. 49) 


而 & 满 足 (5. 46). 又 如 是 一 个 概率 分 布 , 则 正常 返 ,如 以 上 为 
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初 分 布 时 是 唯一 的 一 个 以 鲜 为 由 -矩阵 的 训 道 平稳 过 程 ( 参 见 附 
录 ). 

2. 对 称 化 数列 与 可 道 平稳 分 布 的 计算 

首先 ,我 们 要 将 出 :给 定 : :个 保守 的 QQ 矩阵 
f 即 g, 全 一 gq > 又 设 Q 是 一 个 有 限时 间 肉 不 会 发 生 无 
穷 次 跳跃 的 Q- 过 程 $ 的 转移 帘 度 阵 ( 例 如 满足 定理 5.4 及 5.4 情 
形 ) ,要 判别 是 若 对 称 , 只 要 考虑 记 一 (9,,/g.) 是 否 对 称 (但 两 考 


的 对 体 化 数列 -- 般 不 是 一 样 的 }. 对 后 痢 Kolmogoroy 可 逆 准 则 
《定理 3. 23)? 玉 其 推论 给 出 了 如 下 很 方便 的 充分 必要 的 判别 准则 ; 








在 互通 状态 形成 的 任 一 个 基本 圈 ( 不 含 子 隐 的 圈 ) 一 总- 
-mt 上 有 
了 res -1 (G = 71). (5. 50) 
一 Bie 
它 丸 等 阶 于 
2 0 i). (5. 50)" 
1 dip 
而 且 这 时 
= Tw (5. 51) 
1 Tn 


其 中 一 站 一 入 ii 二 是 任意 取 定 的 一 个 状态 mm 到 状 
态 7 的 -- 条 及 (或 ) 的 通路 . 

由 此 可 见 对 于 给 定 人 @ ,要 判 朵 它 是 省 有 对 称 化 列 , 是 否 对 称 ， 
基 和 否 可 道 只 要 先 检查 (5. 50) ,如 (5. 507 对 一 切 基本 图 成 立 , 册 
《5. 51) 就 给 出 了 对 称 化 数列 , 又 如 (5. 49) 成 立 就 知道 满足 
(5.46) 进 而 如 还 有 





之 由 二 十 co， (5, 52) 
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则 上 是 一 个 可 北平 稳 分 布 , 即 以 £ 为 初 分 布 E 是 -- 个 可 送 平 稳 过 
程 ， 
全 5.6 M/MIN 服务 系统 的 平稳 可 道 性 与 稳 态 下 的 输出 
流 . 
考虑 例 5.2 与 例 5.4 中 过 NB 的 情况 ,这 时 区 常 返 .又 由 于 
当中 一 站 六 1 时 g, 二 0, 所 以 这 里 全 部 基本 图 都 是 形 如 i 一 i 十 1 
一 1 的 二 状态 图 ;显然 
和 = 1 (YD. 
1, 
于 是 (5. 51) 成 立 . 令 


_ lia'l? 
ep 一 1 名 二 他， 种 一 2 与 | es 














可 风车 念 


rl 


1 
LA CA N51 | Nv (5.53) 
则 地 一 (roza) 是 的 可 道 平稳 分 布 . 它 与 在 机 5.2 中 所 得 的 
平稳 不 变 分 布 一 致 .但 这 里 计算 过 程 较 例 5. 2 中 的 直接 解 方程 xQ 
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一 0 ,要 简单 得 考 . 
击 在 利用 倒 道 过程 {区 7_,t E 20 了] 来 研究 在 稳 态 下 (4 即 堵 
分 布 是 平稳 不 变 分 布 r 的 条 件 下 ) 这 个 MMAN 系统 的 输出 过 程 ， 
了 本 和 让 袜 0， 浆 是 在 40, 引 中 接受 过 服务 离 下 的 策 客 人 数 ， 
对 时 细 上 在 系统 中 的 人 数 忒 ,我 们 有 5sT) 
XA CO PRX) 一 7) =X,, 


(5,54) 
其 中 Cw) 好 00, 站 中 顾客 到 来 的 人 数 . 别 对 X, 公 六; ,有 
和 Co) = p(w) (ao) 十 天， ， 
Xs Kr PEK,- (3. 55) 


其 中 ?fa) 与 (ao) 分 别 表 孙 在 [了 一 ,了 T) 中 离开 与 来 到 的 顾客 
大 数 , 我 们 还 知道 ,Ca) 与 (oo 分 别 赴 二 (om) 与 和 (oa) 在 [0,7) 
中 增加 1 的 跳跃 次 数 ; 而 名 (w) 与 Kw) 分 别 是 减少 1 的 跳 蚂 次 
数 . 由头 与 X 闻 分 布 (具有 相同 的 统计 特性 ? 首 日 了 可 以 任意 取 
定 , 我 们 就 知道 

8 Ki) 三 3 Wm) LE, (Cw) 

而 是 和 X67 和 全) 与 和 (X97):f 过 让) 同 分 布 .也 就 是 说 ?也 是 
Poisson 过 程 , 再 注意 到 
六 一 87 一 人 ， 有 一 站 一 ?一 0， 

我 们 有 : 
PO -NDP gg 
CC Cae 
了 
可 网 子 也 是 以 = 为 参数 的 Poisson 过 程 ，(5. 54) 与 (5. 55) 说 明 排 
队 系 统 WAN 在 时 刻 1 时 在 系统 中 的 人 数 区 ,， 在 取 本 着 平 稳 分 
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布 为 初 分 布 的 稳 态 条 件 下 , 除 初 始 值 外 ,是 两 个 同 分 布 的 (但 并 不 
彼此 独立 的 }Poisson 过 程 上 与 了 之 差 ,而 其 倒 道 过 程 生 除 初始 值 


外 ,也 是 两 个 Poisson 过 程 ? 与 三 之 差 . 直观 地 ,由 于 a < 二 NB 及 系 
统 已 处 于 平稳 状态 ,出 入 相 插 , 故 参数 有 的 作用 就 显 不 出 来 了 . 

例 s. 7( 果 联 排队 ) 攻 -个 排队 系统 中 有 两 道 工 序 , 每 个 顾 
客 到 时 先 到 第 -- 个 服务 工序 排队 ,第 - .工序 服务 完毕 立即 到 第 一 
工序 排队 . 息 定 等 待 场地 是 无 限 的 ,每 个 工序 只 能 同时 为 -个 顾客 
朗 务 ,第 i 道 工 序 服务 时 间 训 从 8 为 参数 的 指数 分 布 ,各 工序 的 服 
务 时 间 独 立 , 先 来 先 接受 服务 . 我 们 需要 对 顾客 的 等 待 时 间 进 行 分 
析 , 以 便 合理 地 设 管 服务 人 员 与 设备 . 

首先 我 们 分 析 第 - -工序 的 排队 过 程 ， 

引 理 $.5 在.- 个 稳 态 平稳 的 MM/M/1 排队 系统 中 ( 即 8-> a) 
让 

01) 日 前 系统 中 的 入 数 X, 与 过 去 的 谱 顾 客 离 去 时 刻 独立 

(2)》 一 个 顾客 在 系统 中 的 这 留 时 间 与 它 离 开 前 的 离 去 过程 独 
立 . 

证 明 (1》 上 硕 客 来 到 过 程 是 Poisson 过 程 , 故 它 是 独立 增 
基 的 ,所 以 它 将 来 (4 以 后 ?到 的 顾客 人 数 ( 即 ($, 一 名 ,wu > 41) ) 与 


X, 独立 . 再 由 X 分布 的 时 间 可 道 性 知道 ，X, 必须 与 了， 一 


987 一刀 一 有 ix > 时 的 将 来 值 独立 ,也 即 六 ,一 X 与 原 系统 
过 去 离 去 的 顾客 人 数 及 离开 时 刻 独 立 ， 

(2) 由 于 先 到 先 服 务 ,在 时 间 T, 到 来 的 顾 容 将 在 系统 停留 的 
时 间 与 ,以 后 的 顾客 到 来 情况 独立 . 所 以 在 7 到 来 又 在 5 离 去 
的 顾客 ,在 系统 的 喜 留 时 间 S, 一 多 与 7 后 顾客 到 来 的 情况 独立 . 
将 此 解释 到 倒 逆 过 程 上 ,就 是 说 7 前 倒 逆 过 程 在 时 刻 了 一 5, 到 来 
的 ( 即 原 系统 在 5, 离 去 的 “顾客 * 特 在 系统 中 停留 的 时 间 ( 仍 为 5 
一 全) 与 了 一 3 后 道 过 程 “ 顾 客 ” 的 到 来 ( 即 5, 之 前 顾客 的 离 兴 ) 
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情况 相克 独立 . 即 S 时刻 离 去 的 顾客 在 系统 的 逼 留 时 间 与 9: 之 
前 顾客 的 离 去 时 刻 独立 . 
于 厦 我 们 有 以 下 很 不 直观 的 结果 

定理 5.6 在 稳 态 下 的 串联 排队 系统 具有 如 下 性 质 : 

《1) 同一 顾客 在 两 个 工序 的 等 待 时 间 是 相互 独立 的 . 

(2) 在 两 个 工序 各 自 的 排队 顾客 数 是 独立 的 几何 分 布 随机 恋 
其 ,而 且 





| 


tn 人 在 第 一 工序 ,mw 人 在 第 二 工序 排队 ) 
[到] (1 一 站 儿 训 | 到 |: 
证 明 QQ》 由 引 理 5. 5《2)-~ 个 指定 顾客 在 第 一 工序 花费 的 
时 间 与 他 离开 第 一 工序 前 离开 第 一 工序 的 顾客 ( 即 在 第 二 工序 排 
了 或 离开 的 顾客 ) 情 况 独立 ,但 后 者 决定 了 此 顾客 要 在 第 二 工序 等 
待 的 时 间 分 布 . 
(2) 由 引 理 5. 5(1) ,顾客 在 第 一 工序 的 排队 人 数 与 过 去 从 第 
一 工序 离 去 的 各 时 刻 独 立 , 后 者 正 是 到 达 第 二 工序 的 各 时 刻 , 而 第 
二 工序 的 服务 时 间 叉 与 第 一 工序 的 情况 无 关 , 因 此 第 一 工序 排队 
数 与 第 二 工序 排队 人 数 是 独立 的 . 叉 由 于 在 时 刻 1 在 第 一 工序 
有 "人 排队 的 概率 是 (5, 53) 给 出 的 平稳 不 变 分 布 ， 


P= 
af 
Pn 人 在 第 1 工序 ,m 大 在 第 2 工序 
站 1“ ri armi 议 | 
下 一 别 ( 语 一 间 
例 5.8( 具 弹性 辟 的 连续 两 分 支 过 程 的 平稳 不 变 分 布 ， 
本 例 汗 论 连 绪 参 数 分 支 过 程 的 -个 特例 , 即 f, 二 /二 /二 
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a 





所 以 








1, 但 在 0 点 设 * 弹 性 壁 ". 即 


iO, i 之 1,j 二 1 十 1; 

18， 1 32 一 一 1 

— ?a 二 A), 了 
wy 1 一 0 一 1 

— 7， i= 07= 0; 

0， 其 他 





Ca 一 ng 一 (1 YY 可 称 为 弹性 暑 系 数 , > 一 0 称 上 点 为 吸取 
璧 ,了 =+eo 称 0 点 为 反射 艾 . 这 种 情况 下 g, 一 ie 十 有 ) 是 无 界 
的 ,我 们 在 $5. 4 中 的 方法 不 适用 . 但 由 定理 5. 也 我 们 仍 可 以 得 
到 :8>= 时 这 个 过 程 正 常 返 而 且 有 可 道 平稳 分 布 . 事实 上 ,与 例 
5.4 一 样 可 证 明 久 有 对 称 化 数列 是 





“一 [| 生 ” 寺 ， m=# 
8 1 7 
当 ea< 时 ， 
2 = 治 $§) <t. 
这 时 ,x 一 wpz 人 一 1 其 中 = 一 乡 + 写 二 [全 
而 二 (mms ，) 是 一 个 概率 分 布 ,并 且 


Tg 5 十 $7/ 
严 = "证 


= erp/etB/e<tom 《8 > oa). 
由 定理 5. 4' 可 见 以 x 为 初 分 布 ,Q 为 Q_ 和 矩阵 的 Q 过程 是 可 北 
的 ， 
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3,， 可 诞 QQ- 过 程 的 性 质 

除了 在 及 库 讲 到 的 可 道人 -过 程 ,我 们 可 咏 比 较 简 单 地 薄 出 其 
于 稳 不 室 分 布 外 ,可 道 Q 过 积 还 有 一 个 重要 的 性 质 .下 面 的 定型 
指出 了 此 性 质 . 

定理 $5.7 设 # 是 一 个 保守 的 对 称 Q 过 程 ,状态 室 间 为 ， 
现 考 虑 个 民 的 于 集 44, 今 


[Ys rf 十 ， i 
9 i€ AjE A 
[一 人 ,oo i EA, i=j, 


则 区 = (3) 就 村 应 一 个 以 4 为 状态 空间 的 保守 的 对 称 Q_ 过 程 ， 
记 为 人 (我 们 称 #*" 为 总 或 QR) 在 4 于 的 限制 ), 而 且 当 上 可 道 时 ， 
将 的 可 道 平稳 分 布 限制 在 4 上 , 即 令 
zf 中 | 

所 得 的 4 上 的 概率 分 布 xc, 是 的 可 道 站 稳 分 布 . 

证 明 由 二 wg 一 gueY 417 € 2 服 然 tao E 4) 仍 是 
总 的 对 称 化 数列 ,又 由 于 

之 4 一 aes SE: Sy 一 1， 


‘en ee 

可见 人 R37 A1 是 一 个 概率 分 布 ,并 具 由 定理 5.3 有 
TP LD) = A pe), 

其 中 = (p4000) 是 6 的 转移 阵 . 于 是 以 ze 为 初 分 布 以 名 

为 转移 速率 阵 的 只 -过程 8'* 是 训 逆 平 黎 Q_ 过程. 

例 5. 9 (M/WMAN 排队 系统 的 消失 过 程 ) 在 一 个 稳定 的 
MAMIN 排队 系统 中 若 新 顾客 到 来 时 发 现 排队 人 数 已 超过 了 (六 
六 ) 就 不 再 进入 此 系统 等 待 而 离开 (消失 ). 这 个 带 眼 客 量 (1) 的 
排队 过 程 就 可 看 成 是 由 原 MM/N 排队 系统 的 排队 过 程 限制 在 A 
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一 人 多 了 工 上 的 限 目 过程 . 它 是 以 








1 iai’ 1 
为 平稳 分 布 的 可 逆 Q- 过 程 . 
4. 随机 Ising 模型 的 Gibbs 态 及 其 Glauber 动力 学 的 不 变 测 度 


事实 上 在 有 限 格 点 的 随机 Przng 模型 中 ( 见 $5,3.4 段 ) ,转移 
速率 阵 5Q- 秆 阵 ? 是 ， 
人 (re 7 
QT (gq gu 1o, DEE EY rE .NY), 


其 中 

Cree) = exp -BCH EY-H (EY)) 《5. 56) 
和 而且 驴 保守 , 吨 

ge= >) Cb). 
eA 
容易 看 出 对 任意 的 x € .AY , 若 令 
alf) ~ exp PHEYY, 

则 ae)gty 一 a 《VE 天 和 从 ， 
这 是 因为 车 #7 一 如 由 (5.56) 上 式 显 热 成 立 , 若 7 关 E,E(¥ x 
17), 风 9 一 gx 一 0. 可 见 只 要 取 Z = 过 ec 人 人 , 虽 


ACE A ef(E)AZ (5. 57) 
是 一 个 可 道 的 不 变 平 向 分 布 .而 县 以 At 为 初 分 布 ,相应 的 只 -过 
程 是 以 x(…) 为 平稳 不 变 分 布 的 可 逆 平 稳 过 程 . 
此 外 ,在 不 少 问题 中 (5. 56) 中 的 转移 速率 也 常 取 为 

人) + expt— POH) ~ HY)! (5.58) 
这 时 
__ exp(~ BH) 
201 十 exp(— PCH — HYY) 





{FY geer 一 
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eXDT 一 HH (EC— BCHEED) — HEYY) 
Zt expl BAH — HEY)) 








-Fp AHN) TF cme HS 一 Fe 
一 ACE es 
大 而 于 
HE Ye 一 HON) Re 
即 风 pt 为 初 分 布 :(5. 58) 诀 定 的 转移 速率 的 马 氏 链 是 - -个 半 
稳 的 站 氏 链 ,并 且 它 是 一 个 可 道 的 平 冤 马 氏 过 程 ， 

从 上面 的 两 种 不 同 的 转移 速率 (5. 56) 与 (5. 58)) 就 可 以 看 出 
以 五 46) 为 能 章 晒 数 ,次 定 的 转移 速率 (或 说 只 -过 程 ) 是 不 唯一 
的 , 上面 丙 种 转 称 速 罕 的 取 法 是 统计 力学 中 最 常见 的 . 

舅 - “种 统计 物理 中 常见 的 问题 是 所 谢 由 能 量 聘 数 瑟 (.) 活 完 
平稳 测度 的 问题 . 注意 到 芳 将 wx.) 当 作 一 1 1,+17Y! 上 
的 概率 分 布 ,那么 对 某 一 个 版 定 的 8 ,7 除了 <- 位 图 外 全 和 & 相同 
的 条 件 下 ,# 与 子 相同 ( 即 4cry 一 ?zy ) 的 条 件 概率 昆 ， 

rr | 对 一 大 = Fn)) 


Zexp(— BITCEY) 








六 exp( 一 BH (EY) + 玄 exp(— PC 








_ 1 
1 + exp(— 克 了 ET 一 万 从 有 了 (5. 59) 


在 统计 物理 中 给 定 能 晤 函数 HI7(.) 下 ,将 满足 关系 (5. 59) 的 
概率 分 布 称 为 五 (-) 的 Gipbs 态 . 

对 于 有 限 格 点 ( 即 | 过 | 二 十 ee ) 的 情况 ,关系 (5. 59) 叭 一 地 
出 末 () 决定 K( ) 因为 这 时 (5. 59) 即 


ae) 1 
HE 十 Ap TH opt POP UE — Hy 





于 是 





e/a = exp{— BH(EY) exp BH CE)). 
又 由 十 每 次 改变 .个 位 置 荆 上 的 (x) 值 就 吕 玫 次 得 和 提 儿 二 {- 
1, 上 15 1” 中 的 全 部 组 态 . 于 是 可 见 


fi) = 之 exp - BHCE)), 


其 中 了 一 >,iexbC- PIT)) 称 为 配 人 邹 销 数 . 

信物 理 中 的 隔 个 昌 为 深入 的 重要 问题 是 ， 

1 当 闪 一 十 ee 时 (物理 上 称 为 取 热 力学 极限 ) ,上述 相互 作 
用 能 量 是 再 仍然 有 Gibbs 分 布 ,这 时 的 Gibbs 分 布 是 否 叭 一 ?车 有 
名 个 Gibbs 分 布 ,也 就 是 物理 上 所 谓 的 有 相 变 ,意思 是 一 个 Gibbs 


分 布 表 示 -个 相 ， 
2) 当 呈 二 十 s 时 ,上 述 系 统 的 各 状态 ?之 间 往 往 不 瑟 通 了 . 
如 了 满足 条 件 
HD HOFY (对 一 切 - € (5. 60) 


且 吕 = 二 ee 时 ,意味 着 sr = 0, 也 就 说 从 此 了 出 发 ,过 程 就 未 远 
留 在 了 7. 事实 上 ,1 会 17(z) 王 1.YzE.H 与 一 1 和 17( 三 一 
lVYzE& 1Y) 就 是 满足 (5. 60) 的 两 个 状态 . 但 是 在 有 < 二 ee 时 上 
述 马 氏 链 是 - : 定 互 通 的 ,因而 是 常 返 的 ,而 且 从 一 1 出 发 经 有 限时 
间 一 定 到 十 1 ,反之 亦 然 , 这 就 意味 着 这 丙种 情况 巧 氏 链 的 遍历 性 
有 本 质 的 不 同 . 问题 就 在 于 当 户 一 十 oo 时 马 氏 链 在 状态 之 间 的 转 
称 情况 浙 近 性 质 怎样 ? 随 着 8 变 得 很 大 马 氏 链 处 于 一 1, 十 1 等 这 
样 的 状态 及 跃迁 倩 况 有 什么 特点 ?其 实 , 我 们 可 以 看 到 五 (二 1) 一 
本 (一 1) ,这 就 意味 着 可 道 不 变 分 布 ( 它 也 是 平 儿 分布) 在 一 ] 比 
在 十 1 的 概率 之 比 是 无 穷 小 ( 当 B 一 十 = ), 可 见 十 1 是 比 一 ] 更 
有 吸引 为 ,更 稳定 的 组 态 , 十 1 是 所 有 状态 中 最 稳定 的 状态 ,而 一 1 
较 之 十 1 就 不 那么 稳定 了 ,物理 上 特 它 称 为 亚 稳 态 ， 对 亚 稳 态 的 研 
究 近 来 有 很 多 新 进展 ,由 于 它 与 蛋 外 质 的 高 级 结构 -一 折 梧 性 
(folding) , 曲 体 与 液 唱 研究 ,神经 网 络 的 联想 记忆 等 许多 科学 上 有 
198 











重要 长 近 意 浆 的 问题 相 联 系 ,引起 了 许多 学 者 的 重视 与 兴趣 ， 

?1 及 Clauber 动力 学 动态 粒 于 系统 有 兴起 的 读者 进步 
可 参见 交 献 ， 

liggctt, T. M., Interacting Particle Systems, Springer- Ver- 
lag,1985. 

(ienrgils HO). Gibbs Measures and Phase Transitions, Wal- 
ter de Crruyter, 1 088, 

2) 的 周 题 的 研究 ,在 数学 上 还 方 兴 林 上 各 ,目前 除了 统计 物理 方 
面 有 Penrose 与 Lebowitz 的 匡 可 参考 外 ,其 他 的 数学 结果 尚 只 在 
文献 中 可 见 . 庶 才 可 参考 ， 

Penrose. 0) and Lebocowitz, J]. L., Towards a Regorous 
NolecularTheory of Metastability in Floctuation Phenomena ,2— 
Fd,North Holland ,1978， 

Schonpiann,R.H An Approach to Characterize metastability 
and Critical Droplets in stochastic Ising Model, Ann IHP. PHY 
and Critical Vol. 55,No, 2.591 一 600. 

陈 大 后 , 汉 建 峰 , 钱 敏 平 ,二 维 随 机 Ising 模型 的 亚 稳 态 性 
(110, 了 .中国 科学 (A 辑 )》 第 27 着 ,第 6,7 期 ,504 -513,618 
-623,1997, 


SSs. 1 附 录 


1. 更 新 流 与 更 新 次 数 ( 寓 新 过 程 ) 
在 本 段 中 ,我 们 进一步 计 论 更 新 间 题 (参见 § 2. 5) 设 {了 7 了",) 为 
独立 同 分 布 的 正 从 随机 变量 而. 令 
SS = 0, 《5. 61) 
我 们 假定 设备 的 第 > 次 更 新 (或 大 检修 } 时 刻 为 5， ;或 者 说 第 wn 次 
更 新 的 时 间 问 陋 为 了 = SS， :我 们 称 1 为 更 新 流 ,而 地 
号 身 





了 .的 分 布 称 为 更 新 流 的 分 布 . 

服务 系统 喘 客 的 到 来 ,顾客 受到 服务 后 的 离开 , 记 数 器 中 记录 
到 粒子 的 到 来 , 茶 街 日 机 动车 的 到 来 ,保险 公司 的 索赔 ,股票 市 场 
的 暴涨 , 某 种 大 灾难 的 到 来 等 等 都 可 以 看 成 更 新 流 . 

分 布 为 指数 分 布 的 更 新 流 简称 为 Poisson 流 ( 或 指数 流 )， 
(2A) 分 布 的 更 新 流 简 称 为 站 阶 Erlang 流 , 三 一 1 的 Erlang 流 
就 是 Poisson 流 . 在 (0,z] 中 的 更 新 的 次 数 记 为 N, , 称 为 更 新 过 
程 , 旺 见 


一 sup 人 :9 St}, (5, 62) 
它 等 价 于 

Si = inf{ftyN, 一 天， . (5. 63) 
也 就 是 

{N, 2£) = {5; RL). (5. 84) 


显然 N, 是 依赖 于 : 污 0 的 随机 变量 族 , 即 是 随机 过 程 ， 

以 设备 更 新 为 例 , 如 果 某 人 在 时 间 上 开始 在 此 设备 上 工作 , 则 
设备 已 更 新 了 NN, 次 ,第 和 N, 次 的 更 新 时 刻 为 Sw, ;所 以 这 个 刚 更 新 
的 设备 已 用 了 :一 Sw 时 间 , 而 下 一 次 蝎 新 的 时 刻 为 Sn41 ;也 就 是 
该 设备 还 要 用 5 ,一 + 时间, 因此 我 们 称 : 一 Sw, 为 年 龄 ,而 称 
w+l 一 + 为 余 寿 (剩余 寿命 ). 

1” 团 新 流 为 指数 流 与 前 新 次 数 为 Poisson 过 程 的 等 价 性 ,年 
龄 与 余 寿 的 分 布 ， 

定理 A 下 述 三 个 叙述 徙 此 等 价 ; 

(1 {7} 是 指数 流 ， 

C2》 nC51,… ,9.) 的 联合 密度 为 

Me Mallows cc ys (5.65) 
其 中 4 表示 4 的 示 性 函数 , 即 
|， -人 如 果 4 满足 ; 
0， 如 果 4 不 满足 . 
200 





(3 TD 是 Poisson 过 程 ( 这 就 是 把 指数 流 称 为 Pois- 


son 流 的 原因 》. 
证 明 (1):>(2). 
站 
— -| Xe 4 ed _- [| Xe yd yp, 
” > A 


Ee 51) 








出 此 可 见 (2) 成 立 ， 
为 一 方面 ， i }iz; 与 {34hian 之 闻 的 对 应 是 一 一 的 ;所 以 应 该 


有 (2)=>(1). 
(2)= (3). 
先 求 3. 的 密度 函数 gs (5,) ,由 (2) 用 归纳 法 ， 


有 ss 一 人 je ee | ds1"e"ds, ， 
= Ae 人 
wm 上 


qa Ar Sn 
一 A'e 和 1 人 一 一 TlnsA) 分 布 ). Co, 66) 
其 次 ,由 {189;} 与 入 , 的 含义 及 (C2), 我们 有 
PON., — WN 二 

= PPS, ns) 


一 四 有 二 
| | 4A 所 redo msdsyrrdsn,, 
pr 
- , 


| 





ml mt 
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【《 使 六 5 ,个 (5， 56) 的 求法 ,我们 有 下 式 ) 
上 , Wi ds, 中 e Mm deds ns 


pi 
mm Ed 1 Cs 1 js 
二 A 一 所 人 可 s 








站 





ml 4 (二 ])1 
一 和 [gatedu (5.67) 
于 是 
PON 人) 一 -YPN, 二 nN, = m) 
四 一 二 
一 六 me "| {uyda 一 Ts Ca da. (5. 68) 
入 而 让 45.66? 得 到 


PN — N=Ek) 
= PON Nk PON, N, 守 十 1) 


三 J (gs CK) 一 HS, Ce) Yl 





一 1 人 “Jq 
[人 1 Er au 
_ a CA 
更 上 二 上 
ss A 

特别 PON, 一) 二 Se. 因此 由 (5. 67) 及 (5. 68) 
PON, = pm hs, -如 并) 一 PEN, = PC 一 和 并) 
从 而 


PON, 一 mn NN, 一 下) 一 PON, 一 mleN,, 和 ~N, 一 到 )。 
间 幸 的 推理 可 以 对 0 <4 < 二 和 有 
PN, 一 mA -N= zt 一 Ns =m,) 
== PN, -一 TOPON —N,=m DPCN -- Ni = pm.) 
| 


zt 11 . ma | 


202 





这 加 遂 明了 To 0 的 独立 增 斌 性 ,从而 它 是 Peisson 过 程 ， 
(3 202), 村 DD 和 下 卉 小 上 
Tint 的 合 交 我 们 他 
丰 


ls ~ | + Ys 页, 1) 
Dem Tv | ~ ， [ jt 1 和 MN [1 》 
Nm, DP 四 Dts, -1 
1 上 " 
CA Me Ne ed 


de hh th 
失 以 再。 有 念 A 全 得 (3) 的 窗 度 A ,把 
约束 条 作 -< ss 加 进来 ,最 后 就 得 到 (2 

下 而 我 们 求 指 数 更 新 流 的 年 龄 及 余 才 的 分 布 ,引证 归 刀 路 为 : 
出 i， 表达 有 美的 事 作 . 

年龄 + ，S、 的 分 负 

天 一 Va, > 
而 当 wf 时 我 们 有 
PO Ss eo MPN = hiS, < -0) 


I 


也 了 ， 四 
一 PN 一- 一 站 
上 一 中 


NY) A ON oe 


A 


二 是 

Pt 一 六 了 ) 二 ; 
il, 2 
由 十 这 个 分 布 畏 数 在 + 处 有 跳跃 值 e “ ,而 在 此 他 0] 上 有 "多 
度 ? 阿 数 加 三 .所 内 


《5 D9) 


ES em ied ls 
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特别 


- 
FSv 一 二 - = 十“ (5. 70) 
名 余 寿 Swv， 一 上 的 分 布 ， 
PS 一 人 PCS 一 一 


= DPON, = kN — Ni 1) 


二 


= PPON, = PEON, 1) 





= 1- PN,—0)—1—e*, 
这 说 明 Sw ,1 一 ! 一 参数 为 4 的 指数 分 布 , 即 
Swi — tT C5.71) 
这 里 记号” 三 “表示 等 式 两 边 的 随机 蛮 量 为 同 分 布 的 . 
2* 一 般 更 新 系统 与 更 新 过 程 及 余 寿 . 
对 -下 非 指数 的 更 新 流 {Ti} 对 应 的 更 新 过 程 {Nist 宇 0} 就 不 
再 具有 Markov 性 ,除了 极 少数 外 也 并 不 能 得 到 N, 的 分 布 的 明显 
表达 式 . 位 是 对 于 
zi A EN,, (5. 72) 
在 很 多 情形 下 都 可 以 由 解 一 个 积分 方程 ( 它 是 一 个 第 二 类 Fred- 
holm 方程 ,叫做 更 新 方程 得 到 
下 面 我 们 没 更 新 间隔 7. 具有 密度 f(x}. 
定理 8 设 了 .有 密度 ftzr) , 则 m(7) 全 EN, 满足 如 下 的 更 新 
方程 


mt) = | feas 十 [mc — f(syds, C5.73) 


简 记 成 mm 一 下 十 mx 了 ， 
证 明 注意 TT 及 (5,61), 我 们 有 
m(t) = SRPON, 一 
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Bl PON, = IT. — s) fC)ds 
En " 


一 Va] PS, < 了 一 Ad 


4 





, #11 
= SP DL < DT /ds 
4 二 1 号 [一世 


1 
Rs di), 
一 人 PTs ST 


— WE PGS Ets SNF)ds 





= MPON, 一 Dr 由 


#1 7 


一 | (人 一 3 十 二 ss 











对 于 余 考 的 分 布 ,我 们 有 
定理 C 记 产 Cr) 为 余 寿 的 分 布 函 数 
P(x) A PS 4 te , (5. 74) 
则 gt2) 全 1 一 Fitz 一 ) 满足 更 新 方程 
gu 人 esydy + [gt — sfts)ds, (5.75) 
其 中 了 上 为 更 新 闻 陋 的 分 布 密度 ， 
证 明 让 
gD= PSy it) 





一 | Pe 一 了 人 > x1 =— stsyds, 
仿 定理 B 的 推导 便 可 得 到 结论 ， 
通过 余 才 的 分 布 可 以 给 出 更 新 过 程 的 增 量 的 - -个 关系 , 即 
定理 D 对 祭 存 分 布 "Cx) 有 
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站 一 Pr 一》， k=O; 


PN N,Q=k)= eo Dd 之 1 


(5.76) 
(在 Ss.，-t 有 分 布 寓 度 站) 时, FG) 一 Cd 
证 明 仿 定 塌 C 的 证 明 便 得 . 
3” Erlang 流 的 更 新 过 得 . 
设 1 为 上 阶 Frlang 流 , 即 更 新 间隔 并 遵从 荆 (#,) 分 布 ， 
其 密度 曙 数 为 
CA 


A ot) (k 2 2). (5.77) 


Frlang 流 作 为 更 新 流 比 指数 流 (Poisson 流 ) 更 为 合理 ,因为 后 埋 
假定 更 新 间隔 六 遵从 指数 分 布 .因而 有 
Psd) = PD i), 

出 即 了 ,的 分 布 与 它 的 计 去 的 情形 (s 前 的 情形 ) 无 关 , 如 果 把 设备 
的 自然 更 新 (损坏 ) 作 为 更 新 闻 隅 , 作 指数 分 布 的 假定 说 明了 设备 
没有 折旧 ,这 是 不 合理 的 ,虽然 我 们 在 禁 些 情况 下 ,还 可 用 这 种 模 
型 作为 粗略 近似 . 当然 ,我 们 还 希望 采用 别 的 比较 合理 的 流 ,其 中 
最 简单 的 就 是 Erlang 踊 ,因为 它 的 更 新 过 程 的 母 函 数 可 以 明显 的 
写 出 来 . 

下 面 我 们 将 推导 出 二 阶 Eriang 流 人 的 更 新 过 程 N, 的 好 
苯 数 人 Csz) ， 


Cs) A Fr 一 DP PON, 一 A)e" 
nf 
= PCS (= 08,=T + + 1) 
= 


= YP S01) -PU < 9) er 
Nn 


PD) (下 面 令 4 一 十 了 
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一 下 (十 PS 





下 一 上 上 
一 [te DN, 《5. 781 
一 1 
我 们 注意 到 人。 一 Ghana 和 ) ,并 令 z 一 yy , 则 有 
ca ， a Ar i! 
POS fa" | ~、 | | 
之 et | Dr drj> 





二 A A Sn Cr 站 
> jx 一 [7 一 DT 


uaF a Ary a 
” jw ma lt 2 31 qd 
记 到 阶 原单 位 根 为 se 全 e 肥 ) ,我们 有 : 
l,l 当 ! 是 的 倍数 ; 
Ee | 
3 10， 当 4 不 是 不 的 倍数 . 





于 是 





Sn aa 1 SS 1 1 

一 -一 1 tm 1 AN 加 
2 一 (CEs)’ = 了 (CE Je , 
| 7 1 pp Tl 天 二 E pe + 


从 而 


DI PS, S71)2" | =» | 让 和 去 ) Cer) ev dd 





1 一 
一 3 1 《et te, i] 
” RT ye 0), (5.79) 
出 (5.78)(5. 79) 我 们 有 (注意 = 二 六 )， 
定理 E 上 阶 Erlang 流 的 更 新 过 程 的 峡 男 数 为 
-i , 
fs) 二 1 十 《六 一 1)z#- 1 天 2 a 【1] —-e rl] se y, 


了 
sh 1- eFCe,)’ 


(9. SO) 


ge | 一 1 -- .了 
ff = "chor es ) 十 - he ?| {5 B11 





证 明 取 上 二 2 ,用 所 一 一 工 代 人 人 (5.80) 经 过 初等 运算 化 简 





便 得 (5. 81). 
推论 对 于 2 阶 Frlang 流 的 更 新 过 程 N, 有 
A ] a 
EN, 一 二 十 二 Ce 1 ， 

; i 1 一 ax -ars 
War 一 了 pe 十 Te sh dz ie sh? CaAr}. 
证 明 用 EEN, 一 2 下 ,与 

VarN — SC + EN, — (EN 
可 得 . 
4 更 新 过 程 的 几 个 重要 事实 . 
记 


r= ET, og = Vard', 
对 于 (参数 为 4 的 ) 指 数 流 的 更 新 过 程 N, ,我 们 有 





1 -1 
rr? 二 主 : 
于 是 有 
EN, 1 mm 1 
《1) 一 一 一 (| 一 |=], 
3 EV) z= 1 
V = 
(2) er A= SY 1); 
~ 
i 
RN 二 
NN, 一 此 
(C3) 上 -= 一 : 近似 N(0,1){(f 一 coo)， 
- 元 亿 2 Ge 
we 


(4) ECN,,-- N) == (YY 的、 
+: 


对 应 地 ,在 一 般 更 新 流 的 傅 形 ,其 更 新 过 程 N, 不 再 能 精确 地 
满足 (1) 一 (4 ,而 只 能 在 1->oo 时 在 渐 近 意义 下 成 立 , 即 对 于 一 般 
更 新 过 程 N, 有 
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(1 车 上 一 ET 之 ， 则 


= 1 


r iN 
Er PI» 
x li 天 


《这 一 结论 在 第 ~ eh 


C2)” 薯 中 一 War 二 , 则 | 
wa _ 
Fad 
33， 本 于 ， 出 
1 


近似 入 (OG 下): 





(04) 和 苛 N; 的 分 布 不 集中 下 整 格 点 的 某 个 于 称 的 集合 上 面 
则 
EN,Ls- Ni)— 过 人 
1 
2, 关于 排队 论 的 注 记 


1” 一 般 概 念 . 

排队 理论 是 比 更 新 过 程 更 为 复杂 的 一 种 概率 模型. 它 涉及 服 
务 系 统 . 交 通 运输 .通讯 系统 等 广泛 的 应 用 领 咸 . 应 用 的 需要 与 模 
型 的 数学 处 理 的 繁复 之 间 的 矛盾 .使 许多 实际 工作 者 经 常 如 进 了 
他们 自己 的 直 灯 近 似 . 美 二 排队 论 的 文献 至 今 已 有 十 万 之 多 ,而 且 

每 年 还 以 两 干 的 数量 增加 . 这 里 我 们 只 对 -此 最 基本 的 框架 作 一 

点 注 记 . 排队 理论 涉及 一 个 系统 , 它 包 合 ;: 

一 - 输入 过 程 :-- 般 基 - -个 更 新 流 {了 了,) , 称 为 “顾客 " 流 . 更 广 
地 也 可 是 成 批 的 输入 流 ， 

一 一 服务 设备 《服务 或 服务 员 ? 的 数目 :1 个 ,NN 个 或 co 个 . 通 
常 它们 之 间 是 独立 地 工作 的 , 

- -通常 服务 设备 对 于 不 问 旺 客 的 服务 时 间 超 独立 回 分 布 的 
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随机 变 基 了 .它们 与 输入 过 程 是 独立 的 . 

一 - 服务 规则 :常见 的 是 先 来 先 服务 . 又 可 分 二 种 :- -种 是 等 
待 制 (在 服务 设备 全 用 上 时 ,多 余 的 慧 客 排 队 等 候 ,这 需要 有 充分 
的 等 收 设 序 ); 第 二 种 是 消失 制 ( 顾 窜 见 到 所 有 服务 设备 都 在 入 就 
离 去 ,例如 电话 通讯 }; 第 三 种 是 有 限制 的 排队 , 即 顾客 着 到 队伍 长 
度 已 达到 工 则 离 去 (等 候 设 备 有 限制 ), 除 单个 服务 外 还 有 成 批 服 
务 ( 显 客 够 -定数 才 服 务 )， 

排队 系统 研究 的 几 个 主要 指标 为 : 

一 排队 长 度 的 平稳 不 变 分 布 与 其 平均 值 ,方差 {等 待 制 ,用 
来 为 设计 等 候 室 作 参 考 )， 

一 一 -设备 在 平稳 状态 下 的 平均 忙 期 ,平均 闲 期 . 

一 -平稳 态 下 的 拖 弧 服务 的 报 率 (消失 制 ). 

才 间 的 分 布 与 平均 值 ,方差 (等 候 制 用 以 





为 设置 服务 线 提供 参考 ). 

一 一 平稳 态 下 的 效率 (平均 能 服务 的 顾客 数 ). 

一 个 排队 系统 用 下 面 的 记号 表示 :输入 流 分 布 /服务 流 分 布 / 
服务 线 数 日 . 

一 -MM :表示 指数 分 布 . 

一 一 Ei :表示 点 阶 Erlang 分 布 . 
表示 - 般 分 布 函 数 GCz) ,在 输入 流 中 在 G 上 后 加 1 表示 





是 输入 流 . 

一 一 DD; 表示 请 为 常 值 . 

所以 常见 的 有 M/M/IM/MIN,M/M/co, GUM/1， 

M/AG/1, 等 等 . 

描述 排队 系统 的 -- 个 主要 量 是 

一 一 排队 过 程 N, ;在 时 刻 在 系统 中 的 顾客 数 (包括 正在 被 
服务 的 顾客 与 排队 的 顾客 ). 除 M/M/. 情形 外 ，NV， 一 般 不 是 马 氏 
(过 程 ) 链 ， 有 时 就 机 加 入 过 程 的 附加 信息 使 它们 合 起 来 的 问 量 过 
程 有 蕊 氏 性 ， 
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2” 典 全 |. 

(C1) MAM N 等 待 制 ( 见 8 5. 3.3 及 例 5.1 及 例 5 
(2) MMIN 消失 制 . 

这 时 入, 的 转移 概率 速率 阵 CQ 完 阵 ) 为 有 限 和 矩阵 : 








[一 A 入 
本 4 十 je A 
2 站 — (A 2 A 
CN- 1 — (4 CiN-1)r} A 
Ne — Np 
这 个 日 有 配 称 列 we : 
Ap 一 Pen， 





Ap = C2 pr 


Ap = NEO ps,. 
所 以 {Nst 3 0} 有 可 邮 不 变 分 布 ， 
_ | > fp | {Erlang 公式 ), 
在 平稳 状态 下 , 当 系 统 中 青 N 个 顾客 时 就 拒 收 新 的 顾客 (新 来 的 
顾客 看 到 “后 线 ? 就 离 去 ) ,所 以 顾客 被 拒绝 的 概率 为 


arfi s,s 
NH 二 RTMA Ai /| 人 re | 


(3》 M/M /ee 
这 时 可 以 求 得 六 的 分 布 的 母 函 数 G(x) ， 








Q(z) A SP 一 不)x* 和 > Pee, 


没 z 一 0 时 条 统 中 的 顾客 数 N， 县 有 分 布 
PON, 一 天) =: ui, 


G0,2) 一 au 
仿照 $ 5, 3. 3( 那 里 是 w 个 服务 员 ,如今 是 ce 个 服务 员 ? 我 们 有 


人 = Apott) 填 产 疡 ED) 
Priddy = Apir tet) AF EAP T+ E+ Dupinrtt)y (1). 


由 此 可 以 算得 


A 2 | ， Ar 
序 一 之 At” 一 《一 Da 一 4 | 
即 
A A 
去 十 Afz 一 1 去 一 Afz 1G 一 0. 
令 


_ 总 - 
Gg) = eto VHC,2), 


经 过 计算 ,上 面 的 方程 化 简 为 
路 k(x 一 D0. 
两 边 习 以 RE “上 式 变 为 


QH (zz 一 lye 后 
Att,2)} 本 


这 里 在 方 是 再 Ci,z)y 与 (z 一 1ye-* 关于 导 z) 的 Jacobian. 这 说 明 
于 (t,xz) 是 (zx 一 1)e 2 的 革 个 函数 ( 记 为 声 ), 即 
五 寺 :zz)》 一 天 (2 — le-*), 





利用 初始 值 
Dj = CI0,s) = HCO,z) = hls — 1). 
-于 是 
hlz) 一 之 yat(z 十 1) 
站 
从 而 
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CCpyz)》 = een atl 十 《gz -De “Dt, 
业 - 站 
这 单 GUz) 依 坏 于 G00,zx) {或 它 的 系数 ) 的 选取 ,我 们 把 与 
GD, 二 zw 相对 应 的 和 人 了 改 记 为 pit7) , 则 内 此 可 得 ; 


1 站 让 一 2 让 
六， | 2 Cc (1 © _ 
A 1 





pl) 2 te 
于 是 
po{t) — 友人 [去 ] (1 -- ele Ee 
| 即 参 数 卫 (1 一 e*) 的 Poisson 分 布 |， 这 时 仿 $ 5. 3. 3 可 以 求 
得 {N,:t 之 01 的 转移 概率 速率 阵 (Q- 答 阵 ) 为 


| A | 
rt 2 | 
“一 | 2 CAT 2 A ' 


而 且 久 有 对 称 化 数列 r; 


一 人 

| | a. 
BN {N, :rt 2 0} 以 参数 为 三 7 的 Poisson 分 布 为 林道 不 变 测 度 ,同时 
有 limp, 《ft = Xx,, 


以 上 的 方法 与 结论 可 以 推广 到 4 依赖 于 :的 情形 ,只 要 假定 


4 二 常数 家. 
这 时 候 有 
; 下 
Jim| PR 一 天) -AU 4] ~ 
其 中 


AD 一 Eads. 
Hin 





{dy MG 0, 

这 时 服务 时 间 了 了 , 为 独立 同 分 布 的 任意 分 布 函 数 . 只 要 已 ( 字 
汪 0)>0, 且 mr 全 7, 存在 ,那么 可 以 由 不 复杂 的 推导 (参见 ;A. 
Ya. 欣欣 ,公用 事业 理论 的 数学 方法 》, 科 学 出 版 社 ,1958 年 中 译 
本 ,第 72 页 ) ,就 可 得 到 


limP(N, = 二 ee > 


意 即 当 1 -> oo 时, N, 渐 近 于 参数 为 in 的 Poisson 分 布 . 

(5) M7M71 有 限制 的 排队 系统 . 

这 种 情形 发 生 在 排队 的 队伍 长 度 不 允许 超过 某 个 固定 数 工 
的 情形 ,其 典型 例子 出 更 在 设备 维修 ,伺机 室 设 计 等 问题 中 . 


3. 关于 由 转移 速率 阵 寻 找 转移 矩阵 Pdz) 的 注 记 


我 们 考虑 保守 的 Q ;因为 至 今 还 未 见 在 物理 上 有 实用 背景 的 
过 程 具 有 非 保 守 的 转移 速率 阵 ， 
给 定 - -个 保守 的 Q- 矩 了 名, 即 
WW = (g), 0 gq To0, 0 oo, 
DamD (Yi ES 


它 是 否 能 成 为 某 个 马 氏 过 程 的 转移 速率 阵 呢 ? 也 就 是 是 否 存 在 转 
移 秆 阵 族 P(t) ,满足 
PU = POPG), POO) = i, P'{0)=Q. 
最 直观 的 想法 是 考虑 5 为 有 限 集 的 情形 ,此 时 显然 有 唯一 的 
可 能 : 
P(t} = ee, 

这 个 Pt) 又 显然 满足 后 退 方程 P04) = QPG) 及 前 进 方 程 P' (4) 
王 PP(DQ ,所 以 对 -FF 7 为 无 限 集 ,我 们 很 自然 地 看 看 从 后 退 方 程 
能 否 得 到 一 个 如 上 的 转移 矩阵 . 而 解 后 退 方 程 也 可 以 仿效 有 限 维 
情形 , 先 把 后 退 妆 程 写成 等 价 的 积分 方程 
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Pt 11 | eras. 
然后 再 求 这 个 各 分形 程 的 渤 和 代 解 . 但 是 在 无 限时 直接 先 代 会 引 
起 收 化 性 芋 的 册 稚 .所 以 要 利用 方程 产 (人 一 RPG 的 分 量 形式 
的 等 价 和 分 方程 形 或 作 迁 伐 , 它 的 分 民有 形 区 为 (各 人 芋 一 罗 全 站 ] 

PD pr) + NV gpa tr). 
用 积分 国 了 于 e* 可 得 其 等 价 积分 方程 形式 为 
Puttl 二 Se opalt — sds, 
对 丝 方 程 作 庄 民 ， 
| {1) 0 


1 








i 
Pe) A ed, + Y) | ep (7 — syds, 
kr 


PN) A (py Tr). 
可 以 证 明 
定理 让 Pm) 一 一 > 某 个 Po) ,日 这 个 PO) 满足 ， 
PO) A (ptt)). 
PU = POPO), PAD = OQ, PIO) 一 站 Po 二 P(NQ, 
PA EO DpD El 
(这 个 于 07) 也 可 以 由 前 进 方 程 的 迭代 得 到 )， 
如 果 我 们 在 {7 外 补充 一 个 吸收 在 91 称 为 死 访 ) ,并 定义 
PAD A Pp) GEL), 
PADAT- NPG EL 
:EE 
Pr A pl AD OE, 
那么 
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P 0) = (p39, 

二 一 个 转移 阵 , 即 它 尾 某 个 马 氏 过 程 = 16:z 六 0) 的 转移 阵 ,这 
个 < 的 状态 空间 是 U Ia , 它 的 转移 速率 阵 在 上 的 限制 就 是 
全， 

这 个 P09 (或 二) 有 -个 缺点 ,就 证 多 了 个 吸收 态 3. 因而 
急 只 能 刘 员 二 首 达 9 前 的 行为 , 我 们 把 上 首 达 3 的 时 刻 记 为 6, 称 
为 的 死亡 时 间 ( 或 爆炸 时 间 ). 6. 的 轨道 在 :< 前 是 阶梯 式 的 跳 
获 轨 道 ,但 在 附近 就 会 跳 婚 无 穷 多 次 从 而 "爆炸" 死亡. P 人 (或 
#) 称 为 信 对 序 的 最 小 Q- 过 程 . 

在 物理 世界 中 出 现 的 Q- 社 程 绝 大 凶 数 都 是 死亡 时 间 三 


十 oo 的 .因此 在 数学 上 对 于 什么 样 的 和 @ ,其 已 GD 与 对 应 的 5 
一 十 co[ 也 即 Y i)p, 一 1| 这 个 问题 特别 感 兴趣 . 


如 果 了 P(E 过 十 oo) 之 0 ,在 时 刻 才 处 重新 开始 -- 个 与 全 六 二 
oe»} 独立 辣 分 布 的 版 本 , 则 由 强 马 氏 性 质 可 以 证 明 新 得 的 过 程 的 


转移 矩阵 与 (1) 不 同 , 但 是 它们 具有 相同 的 转移 矩阵 @ ,所 以 说 
此 时 对 应 于 久 的 QQ- 讨 程 不 是 唯一 的 ,也 由 以 介 为 转移 夭 阵 的 转 
移 函 数 族 不 下- 个 , 相反 的 , 当 了 P(E = oo) = 1 时 ( 即 差 不 多 是 二 


十 se 时 ,我 们 由 跳 医 链 的 结构 知道 P (1) 应 该 由 驴 唯 -- 决 定 . 因 
此 称 不 死亡 的 ( 即 $ 三 十 co ?情形 为 对 应 于 包 有 了 唯一 的 和 Q- 过 程 的 
情形 . 从 而 前 面 提出 的 间 题 可 以 复述 为 :保守 的 日 在 什么 条 件 下 
对 应 的 急 - 过 程 唯 -一 . 

这 里 似 述 的 是 对 一 般 Q@ 易于 判别 的 充分 条 件 . 至 于 特殊 形式 
的 所, 就 可 给 出 更 细微 的 条 件 . 

定理 G 若 @ 保 守 , 生 3 CC 梗 
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和 过 人 
划 定 理 忆 中 的 Po) 是 转移 吞 阵 |[ 即 p20 一 TY， 因而 
但 过 程 唯 - .…. 
业 总 厂 有 了 卫 称 列 天 的 情形 ,定理 5 给 出 了 @ 过程 唯 -的 
-个 公分 条 件 . 其 证明 可 参阅 ， 
钱 敏 平 忆 平 险 马 氏 链 的 可 道 性 y 必 北京 大 学 报 #1978) ,第 四 








他， oy = 站 
g | 
lg > 0， ， 
A 14 多 Ai 
0D, ge 0. = 


球 么 天 (5 正 或 林 ) 常 返 当 四 可 当 对 庶 于 妨 的 最 小 和 -过 程 PC (让 
或 索 ? 常 返 (此 时 必然 唯一 ). 

还 有 -种 用 无 穷 维 线性 方程 组 的 解 的 性 质 来 表达 的 唯 - -性 条 
件 , 在 有 些 情形 中 也 能 成 为 实际 上 有 效 的 刊 据 . 
4 关于 生 灭 过 程 的 注 记 
具有 阐 性 辟 的 连续 时 间 两 分 支 过 程 ( 例 5.5) 及 M/M/N 系统 在 
时 刻 的 人 数 A, .部 是 单 侧 生 光 过 程 的 特例 . 这 里 所 请 单 仙 是 指 2 
二 { 1 2.) 的 情形 (相反 的 , 若 5 一 lr, 一 1:0,1.2,..*!, 出 
称 为 双全 情形) 而 所 谓 生 灭 过 程 是 指 其 转移 速率 阵 @ 只 在 证 对 
阴线 及 其 两 仙 的 二 条 斜 线 上 不 等 干 零 的 @Q -过程 . 我 们 只 注意 久保 
衬 的 情形 , 即 苦 





上 :11 
_ 14， or 
9 四 Mp 1 
、 -4 i jo, 





哩 对 应 的 Q 过 程 陈 为 ( 单 俩 的 ?生火 过 程 . 
除了 两 分 支 过 程 及 对 MN 系统 外 .线性 宇 灾 过 程 岂 夫 生 类 
过 程 的 重要 例 了 上 . 
1” 线 性 午 火 过 程 ( 咎 灭 渤 移 过 程 )， 
这 种 过 程 的 
aatia, Trig ladstrt 0), 
其 中 2 称 为 生长 率 , wz 称 为 灭绝 率 ,2 称 为 迁移 率 , 求 这 种 Q- 过 程 


对 应 的 最 小 总- 过程 已 人)【 对 应 于 笔 理 严 中 的 已 tt) ), 可 以 由 定 
理 刁 遂 计 后退 上 万 程 或 前 进 方程 得 到 . 我 们 将 用 前 进 方 穆 给 出 
tp 人 2) 的 母国 数 


Ps 全 > Ct)z']. 


前 进 方程 P' G0 一 PD)Q 的 分 量 形 式 为 
— aap, tt) + p, C1), 了 一 0; 
Putt) 一 - Cat + ap) + Ca ACF ~— 1)) pi 0) 
tut Dpnm(t), jl1. 
注意 p.,(0} 二 人 ,于 是 P,( ,xz) 满足 





本 =atz— DP po A 一 =) 3 

P{0,2) = 2 

这 驴 一 个 一 阶 线性 偏 微 分 程 ,可 以 用 特征 线 法 求解 . 先 把 方程 写成 
ap, 十 一 】 ar, 三 
EE RT ‘#) 


然后 引入 -一条 (实际 上 是 一 族 ) 有 曲线 + 一 z(z) ,使 已 在 trz) 上 可 以 
解 成 > 的 函数 .我 们 想 查 选 fx， 使 方程 左 方 成 为 


dP Q(z) xz) Bp,, 3 
了 | 即 守 Y(2) 十 号 下. 为 此 我 们 只 需 选 :Cz) 使 





i (2) 








一 ] 
Cp Ar)(l] — z) 
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六 一 Et ls 





1 1 A _， 
-一 一 几 -二 

| 1 OA 下 

Cc 注意 森 一 亡 一 上 :加 人 Q- 这 程 为 强度 为 4 的 Poisson 过 程 ). 解 出 
i 


—_l A 一 站 





—log| 一 他}. A 


dP «a bp 
J 二 一 Fei 
此 万 程 的 解 为 
[下 <， A 0 
1 = J Kel:, A 0: 


| 

[Kip 一 Ri， 4 十 4>0 的 其 他 情形 . 
由 十 这 和 解 是 洪 依 积分 常数 局 的 曲线 族 1tz) 求 的 ,所 以 这 个 任意 常 
数 大 必须 依 玉 于 (, 即 应 该 有 有 

=D KU tx)). 
于 基 
(I - Ae) A~H— 0; 

Df) = JE -fazer:, A 


天 一 7p 一 加， 4 十 p 产 0 的 其 他 情形 . 

为 了 攀 定 函数 天 的 具体 形式 ,需要 用 初 值 疡 (0.z) 一 xz .这 样 
[2 A _ 0; 
KEL)) = dy od. A 0; 
于 0 的 其 他 情形 . 


219 








作 变 换 
uo=— te} (Be = i #9), 


我 们 得 到 ; 
(ee 区 一 az 芝 ， > = 0 
KCuy = (se Se 0, #>A= 0 
[ec al 十 上 0 的 其 他 情形 . 


把 它 代 入 Ptz,z) 的 表达 式 , 最 后 得 明显 表达 式 


En ota) 一 和 


Coke 一 DrxpC [Cs i nt) ,Ah Ds 











Pitz) = 
Cs ae 下] 站 一 地 Get 二 二 “十 只 9 的 希 他 情形 ， 
A 
其 中 
1 
二 一 一 ， 六 二 ; 
网 4 一 
人 人 一 > 
1 uA 
Yall Tl 4 天 天 


(如 果 1otz) 在 z 二 /4 附近 分 成 两 支 ,前 曾 的 1 Cn(z) 一 1 中 的 
to 1 需 取 二 (xz) 一 t 所 在 的 分 支 ). 
如 果 e = 0 (无 迁移 ) ,那么 Pt,z) 二 1 , 即 
i j=0; 
0， jy> 0. 
此 时 0 是 吸收 态 , 于 是 ptt) 是 + 的 非 降 函 数 ， 


设 7T, 是 已 (z) 对 应 的 过 程 首 达 0 的 时 刻 ; 
T= inftt > 0.€,= 0) dnfg A+ 00), 


那么 物种 灭绝 的 概率 即 POT < =) .又 国 为 0 是 吸收 态 , 所 以 
(注意 ge 一 0) 


polt) 一 


PT Stié = = pul) = PU,0) 
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5 -站 4= p> 0 





A 
= (a 0) — 0)' 一 ， 1 | 下 
[a | alg -中 |， 4 天 凡 
从 而 
并 < co 15 一 7) 一 人 Se 
注意 到 
(=. 04 一 0 
| 所 | 一 一 Cx {A 站 A , 
于是 
1 ， 4 0; 
1 -oem 一 
四 A 
因此 
_ 了 ， 4 一 大 人 0 
PO lb i 
a 
[4 374 


此 外 ,经 过 仔细 计算 还 可 得 
ET NE = 7) 六 Pen > 6 = dt 


| A ps 


l 
一 TIlog(1 一 AAA ， 4< 民 姑且 一 1 


am IF 二 二 ~. V1 
(实际 上 ,车 i PCi,z) 二 之 Poloz' 则 当 4 二 0 时 ,由 前 面 的 公式 
我 们 可 得 到 
pL] _ ee] — z[A 四 er 2 


J 


马 
[ee Ae 全 一 攻占 一 2 4 和 天 js 








点 
Plt»2) = CP 2))), 
特别 当 a 一 0,p 二 0 (线性 纯 生 过 程 ] 时 ,得 


[Cie Le 于 
ptt) =- 1 人 
Lo0， 其 他 . 


再 列 , 不 论 z( 空 0) 海 多 少 .在 £4: 之 0 时 总 有 对 称 化 序列 皮 





其 
[a PE 
mn ta 二 {nO Dae 【有 
rr ne Er-1 一 ”一 一 pip 一 An 


所 以 当 二 三 1 时 ,定理 5.5' 的 条 件 > 2 < < oo 满足 . 由 此 可 知 


PQ) 是 转移 矩阵 (从 而 了 (2) = PCD ) ,而 县 以 z = {ti 守 中 )， 
有 sl 5 Cou) 








nl 2 训 记 | 
为 可 道 不 变 分布 , 黄 中 
Ca) = ete — 1)4), nn 1: 
上 下 二 -性 
称 为 Pochammer 记号 . 
当 4 一 pp 时 有 tatz) = 元: :由 此 ‘G0 = 二 直人 
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+ CE 一 CS 1 


]- A Oo 1) 
特别 用 让 > 一 上 、 罗 得 到 fC17 -一 让 一 1 十 让 
Pe.1) 一 
这 涪 有 明 当 4 一 pow 守 0 时 P(t) 是 转 移 第 阵 ( 旭 Q 过 程 是 崔 :的 )， 
此 于 当 7 了 站 时 有 
A 
py, Br |a 十 24 ” 
i 全. 如 十 中 。 
[a A 1} 一 ?十 1， 
其 中 有 边 的 数 当 =” 大 时 都 近似 于 -5 ,直观 上 可 以 想象 嵌入 链 忆 在 
nn 天 时 近似 士 对 称 简 单 随机 徘 备 , 因 而 是 零 常 返 的 ! 实 际 上 也 是 对 
的 ), 这 时 由 定理 避 . PG) 也 是 零 常 返 的 . 
类 似 的 理由 可 以 说 明 当 4 六 时 ,对 于 Pt) ( 即 二 ?有 : 除 9 
( 睛 见 本 书记 号 ) 为 吸收 态 外 ,5 中 的 状态 均 为 暂 态 ， 
2” 《和 单 侧 ) 生 灭 过 程 ， 
本 A 和 A 
ai (CA) 十 21) Al 
Hi 一 《As 十 2) 如 


一 一 1 





» 2 0, 12), 


. 。 J 
QQ 有 对 称 化 序列 一 fa:i 这 0} ， 


| a 
i aAl = Asp , 
Le 


al 








i 


时 ,全 x (rt 人 w/z) 是 QQ 的 一 个 可 道 不 变 分 布 . 
3” (双人 删 ? 生 类 过 程 . 


一 《下 Ai 
， jl 
多. j= 二 i 十 1， 

此 时 完全 类 似 地 可 以 得 到 可 道 的 充分 条 件 . 

4” 站 侧 反 射 壁 的 生 天 过 程 . 

典型 例子 出 现在 设备 维修 情形 , 例如 ， 

帮 好 台 设 备 独 立地 工作 ,每 台 设 备 的 正常 运转 时 间 段 为 服从 
参数 1 的 随机 变 基 ,运转 不 正常 就 需 检 和 修 , 设 有 CN 到 M) 个 修 
理工 . 记 六 为 时 刻 上 不 能 正常 运转 的 设备 数 5《 正 在 修理 的 与 待 修 
的 ), 修理 工 独立 地 以 服从 参数 关 的 随 宙 时 间 修 好 设备 . 求 N, 的 平 
和 格 分 布 ， 

解 ” 申 指数 流 的 考 质 我 们 有 


P| 每 各 设备 在 (ot 十 条 中 需 检 移 次 数 | 二 一 | 
| 每 台 在 修 设 备 在 (tv 十 条 中 (革履 好 | _ 人 
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许 利 用 设备 运转 与 检 移 时 间 之 间 的 独立 性 就 可 求 得 NN, 足 具有 下 
徊 的 转移 速率 阵 的 和 -过程 
WO dl: 
[= M2, i=j— 0 
LM4, 7 一 用， 一] 
|N AD i O07 1 
人 
jw 1 一 
一 Np, 1 一 了 一 RN， 
这 个 @ 不 可 约旦 具有 配 称 列 二 jz,0 反 芝 入) ,满足 
Tt A k)p rh 一 站) 有 
即 
Mk) A MOA 
| "NA Pr 机 ol (NA Cn) Na, 
其 中 
~ 杷 靳 抽 二 MM- i! 
"=| 5[| “| [wx] 
是 所 有 设备 都 正常 运转 的 概率 . 而 由 此 乔 到 
_ | ka N: 
| .， 
[ew Dt kr Nip 
讨论 :如 果 六 一 M ,那么 由 上 面 推出 
一 A i i” 
= 人 +2 -|ia) 
A TM 1 ， A 
Ot 一 | 一 站 一 A 加 
WN Chl | a ， 
名 和 是 ”一 村 光一 和 志 的 二 硕 分 布 BCw 六 ,从 而 二 -可 以 
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解释 为 在 稳定 情形 下 每 台 设 备 待 修 的 概率 ,而 车 是 每 台 设备 
不 需 检修 的 概率 , 称 为 ~ 台 设 备 的 有 效 度 . 

如 果 这 虹 台 设 备 组 成 :个 吝 联 系统 ,那么 在 稳定 情形 下 系统 
正常 运转 的 概 举 即 为 tw, ,所 以 这 时 5( 肥 修理 了 上 数目 六 = 设备 数 条 


时 ) 系 统 的 有 效 度 为 区 一 | 关 企 1 ,是 倒台 没 备 有 效 度 之 科 . 

肥 若 这 是 台 设 备 组 成 一 并 联系 统 ( 匡 有 MM 个 修理 工时 ), 那 
么 在 稳定 情形 小 系统 正 常 运 转 的 概率 为 1 一 rw ,所 以 这 时 系统 的 
站 度 为 1 一 一 1 一 | | 

当然 ,这 M 台 设 备 还 可 能 接连 成 其 他 不 同 的 系统 ,对 应 地 就 
可 计算 在 不 同系 统 中 的 有 效 度 一 一 系统 正常 运转 的 概率 . 而 失效 
度 则 指 系统 不 能 正常 运转 的 概率 . 

在 我 们 这 种 情形 ( 即 N = MI) 下 ,不 但 可 以 算出 N, 的 平稳 分 
布 # ,还 可 以 算出 Ne = 0 的 条 件 下 WN, 的 分 布 B0) 会 Cpc 
ppt A pCN, = klN = 0)) ,事实 上 , 吕 要 利用 母 晴 数 方 
法 去 求 前 进 方程 

己 (0 = P(NQ 
的 第 一 行 的 解 ,经 过 不 太 繁 的 计算 便 可 得 到 p(1) 是 参数 一 AM,p 
一 于 (1 一 e721) 的 二 项 分 布 Bw,p) .从 而 可 以 定义 一 各 设 
备 丰 时刻, 的 有 效应 为 
1 


A pp 1 十 A 


A 二 ~: A TF 到 # 
由 此 也 可 以 计算 电 联 情形 、 并 联 情 形 及 其 他 情形 下 系统 在 时 刻 f 
的 有 效 度 及 失效 度 . 
如 果 我 们 知道 了 停产 的 损失 费用 及 设置 一 个 修理 工 的 工资 ， 
七 面 的 分 析 可 以 帮助 我 们 在 稳定 情形 下 设计 修理 工 的 最 佳 配 置 数 
日. 
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一 (1 _ et 一 -一 








5. 关于 系统 有 效 度 的 注 记 
例 把 含 不 同型 设备 且 修 理工 数 与 设备 数 相 等 上 遇 系 统 ) 
天台 设 备 独 立地 运转 . 设 第 友 台 设备 的 正常 运转 时 间 按 参数 
为 水 的 指数 分 布 ,而 当 它 不 下 党 时针 经 参数 为 的 指数 分 布 随机 
时 问 修 理 十 能 恢复 止 常 运转 , 设 有 个 修理 工 , 有 日 修理 时 间 与 正常 
运转 时 间 之 间 独 立 , 求 系统 在 稳定 情形 时 的 有 效 度 . 
解 ” 先 设 4 一 2. 令 
一 在 时 刻 拓 第- - 台 没 备 不 正常 运转 的 和 台数” 
! “第 .- 台 设备 沾 正 常 运转 的 台数 ”XX 2， 
于 是 入 ,能 取 0,1,2.3 四 个 数 , 即 5 = 10,1,2.3}(*0* 天 部 
话 ,“1”.*2* 人 别 肯 未 第 1,2 台 不 正常 ,3 表示 部 不 正常 
用 与 前 面 美 亿 的 推导 可 得 忆 具 有 以 下 转移 如 的 Q_ 这 有 

















1 二 A) A 0 | 
OQ- | A 一 (CA 十 如) 0 
Pa 0 一 Cpr 十 4 
| 0 A A 十 ja) 
这 个 Q 不 可 约 且 具有 配 称 列 # 一 (rm sr sr ) ,满足 
mA Ri ds 一 ap TA = Hpi ma 一 Tf 
妈 ] 
| 一 1 TT 如" 一 和 Ty 所 一 了 和 
1 A A 站 
了 是 N 的 平稳 分 布 4 应 满足 
一 11 十 全 十 富士 生生 一 
A HH Hp! a 
可 匈 稳定 后 的 两 内 设备 串 接 系 统 的 有 效 度 为 
rr， A 人 


A 十 所 和 十 jr" 
如 仿 为 每 侣 ?这 备 有 效 度 之 乘积 (这 文 基 出 两 从 设备 于 常 运 转 时 间 的 
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独立 性 所 决定 的 ) ,而 稳定 后 的 两 台 没 备 并 联系 统 的 有 效 度 为 
册 A 
十 和 和 十 各 





1 mr 一 
这 也 是 与 直观 运算 完全 “ 敏 的 ， 
对 一 般 n 的 情形 相应 结论 的 正确 性 也 是 显 见 的 . 
例 24 有 个 设备 不 正常 就 停工 且 只 有 -个 修理 工 的 系统 ) 
由 个 设备 囊 联 的 系统 ,设备 设备 的 正常 工作 时 间 是 独立 的 ， 
第 各 设备 的 正常 工作 时 间 遵 从 参数 为 大 的 指数 分 布 , 系统 只 有 
-个 修理 工 , 当 系统 有 一 个 设备 不 正常 时 就 全 系统 停工 并 修理 该 
设备 (与 例 1 有 两 点 不 同 ,在 例 1 中 全 系统 并 不 停工 ,其 他 设备 还 
企 工 作 ; 有 个 修理 工 ) 第 站 台 设 备 需 参数 Am 的 指数 分 布 的 随机 
时 间 修 复 , 修 复 后 系统 立即 重新 工作 , 设 修理 时 间 与 正常 运转 时 间 
之 间 为 独立 , 求 系统 在 稳定 时 的 有 效 度 . 
解 令 





0 二 系统 正常 工作 ， 
上 二 因 第 二 台 设 备 在 修理 而 停工 (0 < 入)， 
nm 一 时 刻 上 系统 所 处 的 状态 . 
于 是 NN, 取 值 于 27 = {0,1,…,n) , 仿 前 可 以 证 明 N, 是 具有 下 述 
转移 速率 阵 的 -过 程 ; 
一 


QQ 所 | ， 
\ A A 
这 个 钾 不 可 约 且 具有 配 称 判 下 一 (Nos RL ss A, ) ,满足 
fr 一 PT 一 A 
所 以 稳定 后 的 系统 的 有 效 度 为 ， 


而 .1-1 
一 | 二 全 
+ A 十 十 | ” 
显 儿 由 
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和 | | | 区 

A ! A ' fe 

推 得 和 例 2 的 有 效 度 确 比 例 1 的 有 效 度 遍 . [凡人 在 串联 情形 只 和 需 一 
个 修理 工 :而 且 企 工人 恰 修 是 更 为 台 理 的 ， 

例 3( 只 有 “个 峰 理 工 的 并 联系 统 ) 

这 时 假 医 庶 符 为 二 个 可 类 型 的 , 即 正常 运转 时 间 分 布 都 为 4 
的 指数 分 布 . 而 角 妈 所 需 时 间 分 布 都 为 参数 m 的 指数 分 布 ,同样 假 
定 它 们 独立 及 于 台 设备 独立 地 工作 .所 有 设备 并 联 , 只 有 -个 修理 
[六 * 求 系统 在 稳定 情形 下 的 有 有效 度 . 

( 注 : 如果 设备 为 不 同类 型 侧 只 有 -个 修理 1, 那么 系统 不 再 
能 用 六 过 程 的 办 法 米 分 析 , 国 为 此 时 修理 情况 依赖 于 "历史"《 先 
坏 的 先 修 ). 

解 令 尽 为 时 刘 上 不 在 正常 运转 的 设备 数 ,类 似 前 面 的 方法 
可 以 知音 六 , 是 有 上 下 述 转移 速率 阵 的 和 -过程 ， 


i 














! 五 六 
| A — CAA) A 

名 一 | …. + 
| A 一 《十 A) 六 


|! 天 本 
这 个 颁 不 可 约旦 具有 配 称 列 不 = (Ro Ke oA) :满足 
EA 一 HAros py = (no Ar Hs 一 MY。 1 
所 以 


A 1 上 强 
Tt; 一 dL No nn [4] No nl!| | To, 


从 而 入, 的 平稳 分 布 x 应 满足 
r i A A A 
于 
系统 的 有 效 度 为 
mi 
! “1 | pt | /[5 mx x! 
例 4( 具 有 备用 设备 的 系统 ) 





冷 迪 系统 有 ?人 台 相 同 设备. 其 中 一 台 在 工作 ,其 他 (x 一 1) 台 
为 备用 . 设 有 一 茶 修 理 线 , 设 备 正 常 运转 时 间 服 从 参数 为 4 的 指数 
分 布 , 与 它 独 立 的 能 理 设 备 的 时 间 服 从 参数 为 上 的 指数 分 布 , 求 系 
统 在 稳定 时 的 有 效 度 . 

解 ” 邻 NN, 为 时 刻 : 在 修 与 待 收 的 设备 台数 之 种, 仿 前 面 的 推 


时 可 得 NA， “早上 和 下 述 转移 连 率 阵 的 驴 - 过 程 : 
A 


A 一 人 A 十 六) 不 





二 {DD， 1，…… 天 





_ 
人 @ 不 可 约 用 具有 配 称 列 x 一 _ 满足 
FoH A “md MT (和 


所 以 NN, 的 平稳 分 布 # 应 满足 


> 
| 
| 


2 
玫 一 人 十 雪 十 -+ 
环 即 是 系统 在 稳定 时 的 有 效 度 . 
例 5( 具 有 性 能 较 差 的 备用 设备 的 系统 ) 
冷 由 系统 由 两 台 设 备 组 成 ,其 中 ~… 台 是 工作 设备 , 务 -- 台 是 比 
前 一 台 性 能 较 差 的 备用 设备 . 有 - -个 修理 工 , 当 失 效 的 工作 设备 被 
修好 时 立刻 用 它 来 代替 正在 工作 的 备用 设备 ,而 若 工作 设备 失效 
且 备 用 设备 正在 修理 时 则 立刻 停 修 后 背 并 先 修 前 者 ， 设 工 作 设备 
与 备用 设备 的 正常 运转 时 间 分 别 服从 参数 为 站 ,4 的 指数 分 布 ,与 
它 独立 的 修理 设备 的 时 间 分 别 服从 参数 为 pa ,x 的 指数 分 布 , 求 
系统 在 稳定 时 的 有 效 度 ， 
解 ” 我 们 定义 N, 如同 例 1， 根据 是 意 中 优 先 修理 优先 使 用 工 
作 设 备 的 要 求 ,我 们 画 一 张 示意“ 流向 图 ”， 
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类 似 的 推导 可 得 到 N, 是 其 有 下 述 转移 速率 阵 的 和 过 程 ， 
一 高 0 0 | 
| HCAs) 0 A 
| 6 a | 
| uu D A 一 Ap， 
这 全 惫 在 可 约 但 没有 配 称 列 ,我 们 可以 用 xz@@ 一 0 求 N, 的 平稳 分 
布 一 (xmfisvxayfri) 也 就 是 ， 
AN A 4 es Ds, 
和 ALT CA 十 In — 0, 
1 ~- Cp tt A 十 An 一 人， 
十 十 二 1 .Tm 守 0 
解 此 方程 组 得 到 ， 
A 
和 pe 
A ， 
™ 2 和 六 | 和 了 pi 应 “ 太 Fm 
4 入 二 
mm A Fn 
于 是 系统 在 稳定 时 的 有 效 产 为 
， ， ， ， 
Tt 二 (1 十 元 让 应 十 气 也 去 富 | 元 下 二 ‘ .4 | 


pit4z 十 Ai 
和 人 证 二 


例 6( 系 统 有 处 于 其 他 状态 的 同 珊 备用 设备 ) 

热 凡 系统 由 两 台 相 间 的 设备 ,其 中 一 台 处 于 工作 态 , 另 - 台 处 
于 热 凡 态 , 它们 的 正常 运转 时 间 分 别 服 从 参数 为 iu 的 指数 分 布 ， 
咕 台 设备 在 不 正常 时 所 需 修理 时 间 区 为 参数 为 上 的 指数 分 布 . 有 
-个 修理 了 上 先天 艇 青 先 修 ,但 在 如 果 工 作 态 设备 失效 而 热 斑 设备 
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正常 , 则 后 章 立 刻 转 为 工作 态 ,而 且 理 常 运 转 时 间 的 指数 分 布 的 参 
数 由 转变 为 4 ,此 后 如 果 原 来 处 工作 态 的 刘备 修复 , 则 此 修复 的 
设备 转 为 热 凡 状态 ,并 且 其 运转 时 间 的 指数 分 布 的 参数 由 4 转变 
为 ,六 这 个 系统 在 稳定 时 的 有 效 度 ， 
解 今 
0 二 两 台 都 正常 ， 
1 = 一 台 处 于 工作 态 , 另 - - 台 在 修理 ， 
2 二 两 台 都 不 正常 (系统 失效 ). 

2 一 1 人,3) ,NN, 为 系统 在 时 刻 ! 所 处 的 状态 ,用 类 似 的 思路 可 以 
推出 六 是 上 共有 下 述 转移 速率 阵 的 QQ- 这 程 : 


| 一 (4 十 二 A 二 点 0 
QQ x 一 (4 二 +u 4, 
| 0 A — 
这 个 已 不 可 约 且 具有 配 称 列 ， 
T= (No Ni Ae), 


NaotaA 十 办 = RTA 一 A 
所 以 N, 的 平稳 分 布 为 + ， 其 中 





1 
A 
X= 1 + 2 A240) 和 
六 2 ! 
于 是 在 系统 稳定 时 的 有 效 度 为 . 
1 一 四 =1 4C4 十 0) 





上 十 届 十 四 AP 十 MA 十 轴 ' 
习 题 
1. 车 随 祝 过 程 N, 取 非 负 整数 值 ,满足 


(CP,} MN, == 1; 
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(PP ) A 为 独立 增 量 过 程 . 即 站 0 有 
NN 相互 独立 : 
(CP) 当 六 >0 时 有 
PEN NO—1)— ah oh). 
. PN — N02) = wth). 
记 入 ,的 屋 队 数 为 














Gf) 人 D> Pl), 

上 中 

Pt) PON,— k), 
求 计 它 渍 是 
I 一 Mkz — DG, 
[C00,2) 一 工 . 

并 由 此 证 明 Crtrz) 一 ex 0 及 N, 是 Poisson 讨 程 . 
2. 若 随 机 过 程 蕊 取 整 数值 ,满足 
《Pi 
(站 :》 独立 增 量 ; 

CP) 当 玉 一 0 时 有 
i ERs R= -1h toh, 
CX 一 省 := 二 外 十 fy， 
AL 一 1 一 of 
记 X, 的 母 函 数 为 





Gia) A 人 PX, = hr. 
求 忆 满足 的 方程 ,由 此 证 明 ; 
GR) = eI, 
并 及 有 六 ,.，- 让 ,三 XX 再 求 EX, ,Varx,， 
3. 在 习题 1 中 的 (2) 若 改 为 

















CP',) 当 太 x 0 时 有 
IN N= 1)= A of), 
sPeN,.s — NT 2) — deh + 0(h), 
PNG N34) — oh). 
碟 解 出 六 的 司 亢 数 , 你 能 否 再 进 - - 步 推广 闪 
上 -一 其 一 站 一 让 十 六 fr 宝 下)， 
PAR OK) 二 ok) (i. 
‘PIX, OO— KE Lo Lk > olh) 
这 种 情形 ， 
4. 在 习 题 1 的 (PN 中 将 4 改 为 1) , 求 下 (fr) 开 Var 
《对 应 的 过 但 称 为 非 齐 次 的 Poisson 过 程 ). 
5. 在 二 其 2 中 的 (PD 将 入 户 改 为 A000 J) , 求 Gt2)， 
6. 推广 习题 3 中 至 4,A 依赖 于 上 的 情形 . 
7. 在 习题 1 中 的 CP:) 如 果 改 为 
人 Cr — N= 1IN, 二 有 一 十 e 闫 )， 
[PON — N22|N, = A) = oth), 
求 Pei 会 PCN, == 满足 的 微分 方程 ,并 靛 出 Po PC， 
吓人 
8. 设 非 负 整 值 的 随机 过 程 1N,;z 宇 0) 如 满足 ， 
C1) N, 独立 增 量 , 且 NA 二 
(C2) YY20< POOR = 0) < 1. 
求证 存在 0 二 14< .> ,使 
PIN,=0=e *. 
9. 设 非 抽 整 值 的 随机 过 程 (Ni,;t 宇 0} 如 满足 习题 8 的 条 件 ， 
而 生还 满足 





PeN, = gkIN; 2 0) = pah 4 ohy. 
求证 入 ,的 母 函 数 有 表达 式 
人 
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其 中 


ELl2) 一 pz . 
这 
这 个 ， 人 六 0 也 称 因 上 之 Polsnom 过 各 ， 
所 天 :念书 0 -PEON ,和 完 球 ww 交 示 


rt 
BR ND eNO pp uD) Tr ol), 
1 


0 设 {2 为 Lid.， 其 分 布 为 参数 p 的 几何 分 布 ， 
下 人 一) 一 (1 
三 
(1) 5, 遵从 什 . 项 分 布 : 
1 

462) ,遵从 参数 为 疡 及 二 的 “项 分 布 ， 

(C3) DS) 一 站 一 二 pa "1 {再 时 它 得 出 
Pls, — /1) ), 

C4) PAN ~ No, 1 这 2) 二 DA, - A : 与 MN, 和 这 ， 
| 1 ， | 加 | pp. 
0 1! lg, 

《6) 办。 为 简单 随机 徘徊 , 即 若 X 人 NA， NN， .出 4 为 
iLi.d. 随机 列 . 

1 环 明 与 J 题 10 反 向 的 结论 ; 兰 六 ,为 简单 随机 徘徊 .那么 
对 于 


(C5) P| 一 和 -= 


SiO infln;N, -= 7。 人 AS A), 
在 
OQ PS hsS, 1 pre 
(20 1247 为 让 id 几何 分 布 . 
注 : 由 习题 10 与 习题 11 证 知 康 有 如 下 的 村 点， 


A 
上 二 


连续 时 间 离散 时 间 
Poissnn ?这 程 A 阐 单 随 祥 徘 币 入 , 


[S| 
es 
<T1 





Ey 





{2; 典 新 时 和 间 : 店 分 布 角 二 功 分 布 

43; “于 新 强度 ”lm 人 一 

sd 联合 下 新 冲 度 he os pra lori, 

:0 菜 件 分 布 . 

PEN 三 Ns 为 二 项 分 布 
为人 村 布 

12. 设 0. 如 内 进入 计数 器 的 粒子 数 六 是 参数 为 4 的 Pois- 
son 过 哥 . 六 若 每 个 粒子 在 进入 计数 句 后 能 被 记录 下 来 的 概率 为 
六 记 X, 为 [0,1J 中 被 记录 到 的 粒 计 数 , 求 六 ,的 母 隐 数 及 EX,， 
Vark,. 

13, 设 玉 ,为 Poisson 过 程 , 求 

NO EN 一 Rn) 

14. 设 1N ,7 宇 0} ,UMi;t 宇 0) 分 别 为 相互 独立 的 参数 为 4 与 
4 的 Poisson 过 程 汶 PON, 二 有 十 NN 二 nD)( 扩 n)， 

15. 把 习题 13 与 习题 14 移植 到 离散 时 间 参 数 的 情形 . 

16.( 广 义 更 新 流 与 广义 更 新 过 程 ) 设 ! 卫 ,} 为 独立 的 正 随机 
变 最 列 , 5; = XX, 十 一 十 基 .为 (0 出现 的 SS, 个 数 , 即 

N= max{k:S, 1. 

NN, 称 六 由 广义 更新 流 { 和 ,决定 的 广义 更 新 过 程 , 求 证 N, 是 马 氏 
链 . 

17.《〈 具 线性 增长 率 的 纯 生 过 程 ) 设 已 到 非 负 整 数值 ,满足 

上 一 上 十 上 

PRs -R= R=) 1 i olh), 


A PN = 8 








| 了 一 
(oth) 其 他 ， 
求证 必 , 是 时 齐 马 氏 链 ,而 且 
(1) piss) A POX, = i+ EI, 一 人 
人， ;= 0; 
一 了 9， Oi>0 


Ch Ce Yl] - Ct, 点 0 人 





(2 荐 mM EN, 一 me tAVarN, met] ee 人) ， 
提示 ; 仿 Porsson 过 程 站 稳 情 形 , 建 立 pt 满足 的 方程 .1 钠 的 逐个 求 
解 , 王 -长 条 件 特 入 阴 数 从 而 得 EX WarX,， 
18， 若 整 值 过 程 XX, 满 是 
天 [和 一 门 





[有 二) 了 一 一 1 
| (十 太古 十 op 了 一 六 

本 | 二 uth), jirl1; 
nth), 其 他 


{这 种 过 积 轩 生 : 炎 过程) 位 生 站 在 忆 使 ¥i 关 有 
A 
求 
lim | pattydt. 
此 中 
(二 站 一 站， 
19. 设 韭 时 齐 的 离散 更 新 流 {X,}( 即 {X,Y 为 独立 列 ) 满 足 





io 1! 
XN | tg, 一 ] 疡 , ] 。 
Ig, pp! 
人 二 站 | 十 所 Hr 十 Xs N, 一 maxikn, Es 2 
求证 年 龄 
习 , 站 扩 一 Dy, 
是 马 氏 链 ,其 转移 阵 Cp,,) 为 


(9 ， 了 一 0; 
Pr = ps 7 一 了 十 |; 
9， 其 他 . 


青 问 什么 时 候 {4,:n 庄 0} 正常 返 《此 时 一 ?), 什么 时 候 暂 态 , 什 
么 时 候 零 常 返 ? 
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20. 车 与 7 是 两 个 相互 独立 的 Poisson 过 程 , 则 二 他 入 空 
0} 仍 是 Poisson 过 程 , 其 中 
二 之 0). 
21. 匠 o 全 有 8E" ,其 中 总 是 Poisson 过 程 , 试 求 出 w%”. 
22. 试 证 明 Poisson 过 程 是 非常 返 的 . 
23， 设 二 是 连续 时 间 和 参数 的 分 支 过 程 , 而 有 遇 其 转移 概率 
(pt2)) 满足 前 进 方程 , 试 证 明 对 天 空 1 有 


Yrs > 
We (22 一 Dg (gi Cz)), 
上 一 


其 中 
Er (Cz) 一 By pC 人 之 1). 


了 


24. CYule 线性 纯 生 过 程 ) 考虑 连续 参数 分 支 过 程 的 特例 ， 
即 (5. 33) 中 1 
f=0, f=] (2) 
的 情形 . 试 证 明 这 时 存在 唯一 的 转移 阵 (p,, (1)) 满足 后 退 方程 ， 
Palt) = Dgrpy ty, pt0) 一 全 
25. 设 = 是 取 +1 或 -1 的 二 信 随 机 变量 ， 


PE 一 | D 一 PE= 一 D= 二 . 


又 设立 ,一 (一 0 和», 其 中 {Nst 宇 0}) 是 与 & 独立 的 Poisson 过 程 ， 
求证 是 XX, 马 氏 链 . 求 它 的 Q- 矩 阵 及 平稳 不 变 分 布 ， 并 证 明 它 是 可 

26. 车 N, 为 Poisson 过 程 ,性 为 常数 ,求证 站 ,和 全 N, AC 为 时 
齐 马 氏 链 . 

27. 求证 Poisson 流 的 年 龄 与 余 寿 相互 独立 . 

28. {Ss} 为 以 4 参数 的 相互 独立 的 两 个 ( 即 = 1,3 ) 指 数 
流 . 其 对 应 的 计数 过 程 为 Poisson 过 程 Ni* , 求 汪 NS 一 sh 服 
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区 参数 为 区 人 的 几何 分 布 

29. 匡 容 院 有 NN 个 美发 师 朋 只 能 容纳 型 个 顾客 (本 次 )， 
第 MT 二 1 个 顾客 就 自动 离 去 . 设 师 客 以 堆 数 为 4 的 指数 到 过 流 ,他 
次 容 所 沉 时 间 服 从 参数 为 产 的 指数 分 布 而 旦 与 到 达 情 形 独立 , 求 
时 刻 / 在 美容 院 中 顾客 数 N. 的 乎 稳 分 布 ， 

30. 有 交合 设备 ,入 台 的 正常 运转 时 间 都 服从 做 数 为 4 的 指 
数 分 布 . 检 覆 所 于 时 间 款 服从 做 数 为 卢 的 指数 分 布 且 与 运转 情形 
独立 ,各 台 度 备 也 独立 - 假定 采用 如 下 的 恰 修 方案 :有 天台 不 能 正 
常 运转 就 他 部 停工 检修 . 记 时 刻 1 不 能 正常 运转 的 设备 数 为 N, . 

(i) 求证 ,为 具 丰 下 述 转移 速率 阵 的 站 -过 程 ， 

一 上， 





-一 《NM 一 站 有， 0 了 一 上 < 

Cn CO— A, ss < 一 十 |; 
中 一 i ?Rj 0: 

-A {7 *; 

lo, 其 他 情 撒 . 


Gi? 求 ,的 平稳 分 布 . 


Ci) 令 pj 二 p77 一 limEN, .证明 ; 
Tr 
Me 2 I SE pl, {tf 1), 


并 讨论 什么 样 的 使 mi 最 大 . 

31. 在 MVM/2 中 设 顾 客流 的 指数 参数 为 4 :服务 时 间 分 布 的 
已 > A - i 
指数 参数 为 上 ,里 法 志 1 如 果 改 用 - -个 比 原来 的 两 条 服务 线 快 
” 倍 的 - -条 服务 线 ( 即 改 册 My A471、 世 是 服务 时 间 的 指数 分 布 为 
247. 试 以 比较 这 两 种 服务 条 统 在 像 定 情 形 下 的 平均 排队 的 队伍 
八 度 判 饰 其 从 省. 
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32. 在 Ai ,1 中 兰 每 当 队 佑 长 度 > NN 时 就 增加 一 茶 服务 
线 , 而 当 队 伍 长 度 过 六 时 就 梳 掉 新 增加 的 那 条 服务 线 . 求 排队 队 
全 长 度 ;的 平稳 分 布 ( 队 伍 长 度 是 指 在 系统 中 顾客 的 数 自 ). 

33. ( 带 随 机 消失 的 WA) 在 下 列 情形 二 分 别 求 在 时 刻 
系统 中 顾客 数 入 ,的 平稳 分 布 : 

(i) 新 来 的 顾客 看 到 原来 的 N, 二 LC 1 则 以 概率 pp 留 下 ， 
以 慨 率 1 一 p 离 去 . 

Ci) 中 N, > 则 离 去 ,而 在 六 所 :时 

则 以 概率 = 二 六 人 -和 留 下 (这 时 N, 是 -个 具体 的 数 ) ,以 概率 
1 一 户 离 去 . 
Ci 站 Di 下 为 p 二 人， 
1 十 

34- 出 租车 站 以 指数 流 2 来 车 ;顾客 则 以 指数 流 A 独立 的 到 
站 ,假定 - 辆 车 只 载 - :个 客人 , 且 顾 客 到 站 时 如 看 到 已 有 两 人 在 等 
候 时 就 自动 离开 , 设 分 < 1 , 求 等 候 客人 的 出 租车 在 稳定 情形 下 
的 平均 数 . 

35, 分 别 在 GWM/N ,GIAM7oo 中 把 输 人 人 流 的 计数 过 程 由 
Poisson 过 程 改 为 复合 Poisson 过 程 , 说 明 此 时 在 时 刻 上 在 系统 中 
的 顾客 数 NN, 仍 为 马 氏 链 , 写 出 它 的 转移 速率 阵 @@, 并 讨论 什么 时 
收 有 平稳 分 布 , 它 是 什么 . 
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第 六 章 ”随机 达 代 册 射 2 了 离散 时 间 
连续 状态 的 号 氏 链 


在 许多 实际 问题 中 ,有 时 候 时 间 是 离散 的 .例如 对 计算 机 科学 

中 .上 由 十 计算 总 是 : 步 步 地 进行 的 .时 问 指 标 白 然 应 是 离散 的 , 此 
外 ,很 多 情况 下 ;观察 是 定时 的 ,例如 每 秒 -次 ,每 分 一 次 ,得 小 时 
一 次 ,等 等 ,于 旦 采样 时 间 自 然 只 能 也 是 议和 散 的 了 . 另 一 方面 ,我们 
羡 不 时 将 状态 作为 离散 的 来 处 理 . 例如 求解 非 线性 方程 

-十 1g7 一 站 (6, 0) 
时 ,如 盯 我 们 把 并 程 (6. 0) 的 解 看 战 是 达 利 也 数 

FOrY = Crtt igry: 

的 最 小 值 ( 索 ) 的 点 ,而 仿照 前 面 提 公 的 模拟 进 火 的 思想 去 求解 , 那 
乏 下 就 不 宜 看 成 是 离散 的 ,市 求解 的 这 程 遇 到 -- 州 具有 类 似 于 第 
-童生 : 进 过 的 " 妃 氏 性 ?而 取 傅 连续 的 随 祈 变量 序列 ,或 者 说 ,状态 
连续 ,有 时间 离散 的 马 氏 链 . 本 章 对 连续 状态 马 氏 链 作 -个 初步 的 研 
TE. 





8 6. 1 随机 迭代 映射 与 连续 状态 马 氏 链 


首先 让 我 们 来 看 一 些 例子 - 
例 5.1 设 W, 是 iid. 随 机 变量 序列 ,而 
$1 CO— FE) + Wh,, 

并 HL 习 W 独立 .那么 化 ,; 4 访 中 是 随机 碗 代 映 射 所 决定 的 随机 
序列 . 这 样 的 随机 序列 -十 分 常见 :例如 在 一 个 连 代 记 录 中 ,每 次 会 
有 误差 1W,} ,就 会 有 .上述 结果 . 您 和 一 为 已 知 的 菜 件 十, 我 们 有 
与 六 也 与 (6,， 
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WW 引 有 分 布 密 度 PC 是 
PE 
一 PCD F Ws lb Tb 


PF) 上 
一 - | 轴 Pez dz. 
同样 也 有 
PE Svs = pd = | pl fr)dz, 


下 坊 我 们 有 
Db,. 1 vl, 一 i 4 四 一 PB, ] yk, 一 xX) 


一 中 “pezydz 一 上 lz 一 fr de. 


第 一 个 等 式 与 第 汪 章 中 的 蕊 氏 性 质 非 常 相似 ,不 同 寻 在 十 第 三 章 
中 的 六 大 取 可 数值 的 ,而 现在 的 总 是 取 连 续 值 的 . 这 种 随机 序列 
称 汶 连续 状态 的 马 氏 链 , 而 

FCr,y) < Ce — fde(= Pn Sylb, = x)), 


在 zz 辕 定 的 条 件 下 是 y 为 变节 的 一 个 分 布 图 数 , 称 为 从 所 转移 到 
[a 的 转 称 分 布 隔 数 , 它 具有 有 密度 oly— f(x}) , 称 为 从 入 到 吕 3， 
的 转移 概率 密度 ,这 是 -- 个 条 件 概率 密度 ， 
下 面 我 们 来 看 -个 稍 复杂 一 些 的 例子 : 
例 6.2 设 {W.} 为 独立 序 询 , 且 氏 , 有 分 布 密度 p(y)， 
= HW.), 
与 WV 独立 ,此 时 Ws f(r; WD) 应 与 {bn ,) 独立, 于 
是 
Pb yt = rb = = 0) 
= PT WY) Ey = 7 = 0) 


= PCF WY) Sy) = | pz)dz, 
ir 
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同样 由 丰 
DE = | ， Ad 


i 


天 Tv | A dz, 


捍 么 齐 品 一 已 知 的 菜 首 下 的 条 件 分 布 国 数 为 天 Css- 
在 这 两 个 例子 中 ,我 们 都 有 
DG, | [i oP |, ). 


所 以 计 ,:n 宇 0} 都 是 连续 状态 的 与 氏 链 . 但 是 在 例 6.1 中 小 式 布 方 
一 T pteyds, 与 2 巨商 , 所 以 你 为 时 齐 的 马 氏 链 . 所 在 例 6. 2 


由 上 式 有 有 方 | pz)as, 它 依赖 于 ,所 以 纪 ,; 是 上 时 并 的 马 
代 链 . 

从 这 两 个 例子 我 们 叮 以 抽 旬 成 下 述 定义 : 

定义 56.1 (连续 状态 马 氏 链 ) 随机 过 程 这 
续 状 态 离 敬 ( 时 间 } 参 数 的 马 氏 链 , 和 如果 对 ¥ 训 诗 1.10 及 ry 
ren | 它 民 ;邦和 右 

Pb yb 1 
一 Pb | = 17). ‘6.1) 

为 了 阿 昌 测度 论 : 我 们 代 定 55， 有 联合 密度 六 这 时 
56. 1) 本 理解 为 


二 . Fra rs dz| | ee st)dz | 


| | [ . [Ee + a er 1ds 


en da de ol) 


wr 


记 (的 联合 密度 为 amt +r) ,于 是 (06， 1) 的 石 方 有 "分 布 
密度 /G0 |/ .wdy] “你 为 从 到 的 转移 概率 
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密度 5 条件 报 率 宫 麻 ) , 记 为 疡 (ar5 3y)， 
连续 状态 马 氏 链 有 与 $ 3, 1 类 似 的 许多 性 质 ， 
[pus rim ydy = 1， C6. 3) 


Jplnscim sp lm ert yde — paxiltsy) (a 
《6. 4) 
‘形式 上 ;上 式 就 是 在 命题 3. 1 中 将 ?7 换 成 yyrzy 对 了 求 和 换 
成 对 积分 , (6.4) 称 为 Kolmogorov-Chapman 方程 )， 
定义 6.2 连续 状态 马 色 链 = (人 :2 六 01 称 为 时 齐 的 , 恕 果 
(6.1) 古方 不 依赖 x. 
我 们 仍 考 虑 有 密度 情形 ,这样 对 时 齐 情形 我 们 简 记 
p(x) A pO TIm,y), 
PT A pOTil,y) = prin + 1,»). (6. 5) 
于 是 (6. 4) 化 为 


pm Cr,y) = pCa)pm Cz, yydz . (6. 6) 


此 外 ,与 离散 状态 马 氏 链 类 似 , 我 们 在 本 章 以 下 部 分 永远 假定 有 转 
移 密 度 {pP(ayrimyy)) 而且 满足 56. 3) (6. 4);:; 但 是 让 初 值 & 可 
以 到 任 一- 值 或 任 一 分 布 . 

利用 (6. 3)，(6. 4) ,还 可 与 离散 状态 马 氏 链 类 伏地 有 :如 果品 
有 分 布 密度 po(y) ,那么 


1 
= 小 | Pl Orotl sm ) 


A 


xX pin 一 lrsisns rd ddr-dr,. 


但 是 对 这 个 公式 作 严 格 的 证 明 需 要 用 测度 论 的 工具 . 
例 6.3 设 克 ,为 让 d. 的 入 (0,1)( 标 准 正 态 ) 随 机 序列 , 叉 
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CO 这 0 日 二 阶 光 滑 , 再 设 了 的 全 部 最 小 倩 点 组 成 集合 3S-= ti， 
0 ,考虑 
,hE Wf) th 0) bo 7. 
这 是 例 6.2 的 特例 ,而 在 飞天 已 知 这 - -条 件 下 到 局: 的 转移 
国 数 


i 
_ ——e zdz 
Flirtsy) | DO 
人 Loa 
一 一 oe : >! 
， v 2 
它 具 有 转移 密度 
TT 
] 2 1 ofr 








pinsrsn dd 1.»)= ef -7 二 
= Nr ATA Er Cy). 
下 入 是 非 时 齐 的 连续 状态 马 氏 链 , 非 时 齐 是 由 * 小 参数 "e, 依赖 
于 = 引起 的 . 
我 们 注意 如 果 世 Go)ES, 就 只 有 小 扰动 项 6W ,了 (5,). 也 就 是 
这 个 链 的 轨道 -- 蝇 到达 了 的 最 小 值 天 离开 它 的 小 邻 域 的 可 能 
性 就 较 小 了 , 这 个 思想 启示 我 们 思考 是 否 能 用 这 个 链 来 "近似 "地 
找到 让 的 最 小 值 的 位 置 , 以 后 我 们 会 介绍 ,如 果 适 当 地 选取 6»0， 


i 











任意 固定 0, 其 中 BstS) 是 指 S 中 所 有 点 的 ， 人 条 域 的 并 也 就 
是 过 代 足 例 多 次 后 以 近似 十 1 的 概率 六 会 到 于 f 的 取 最 小 值 的 
集合 任意 近 处 . 这 就 是 用 随机 先 代 模型 来 作 模拟 退火 的 基本 思想 ， 
这 里 依赖 "是 至 关 重 要 的 ,这 一 数学 模型 对 于 在 计算 机 上 作 涉 
及 随机 困 素 或 噪声 的 大 部 分 运算 是 -个 很 好 的 表达 公式 , 因而 它 
只 有 广 深 的 诬 用 领域 

求 明 数 g(r 零点 的 问题 可 以 化 为 求 gtz 六 的 最 小 值 回 题 . 伟 
二 用 模拟 运 火 去 作 . 
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65. 2 Dobrushin 不 等 式 .指数 遍历 性 与 收效 性 


在 第 一 章 中 ,我 们 曾 对 离 辟 号 氏 链 的 在 4 村 的 极限 行为 
进行 了 讨论 , 在 本 竹中 我们 将 利 朋 Dobrushin 不 等 式 , 对 于 连续 
状态 的 急 红 链 得 钊 与 定理 3.8 相应 的 结果 ,这 类 结果 要 凑 转 移 概 
率 密 宰 存 在; 计 满 是 较 强 的 二 则 亲 件 ,但 扰 其 结论 不 仅 可 以 得 到 : 
步 转 移 购 率 密 度 当 :一 一 时 的 极限 趋 于 唯 - 的 不 蛮 概 棕 分 布 密 
度 ,而 于 保 进 惑 共有 具 有 指数 型 的 下 降 速 度 ( 栋 为 指 妆 遍历 性 ). 这 -- 
结论 比 之 于 : 般 的 马 氏 链 的 遍历 定理 蝇 得 名. 


1 Dobrushin 不 等 式 
设 p(t) 一 1,2) 为 R( 也 加 以 是 ) 上 分 布 密度 ,p(sy) 蚌 
RR 上 的 转移 密度 , 即 
pr) 0 piriy)dy =1, (6.7) 
完 义 图 数 u 的 模 为 
Fol = | vcr) lade. 


即 v 的 荆 模 . 当 w 为 两 个 分 布 密度 差 时 , jij 即 为 相应 的 两 个 分 
布 羡 数 的 差 的 * 全 空 差 * 
命题 6. 1 (Dobrushin 不 等 式 ) 在 前 而 的 假定 下 ,我 们 有 
| fac,. Yort.rydr 一 [pe 站 Crdzi 


pe- pl, 《6. 8) 

其 中 Ctp)( 称 为 转移 密度 kz,y) 的 Dobrushin 数 ) 由 下 式 所 定义 
~ ] 

Cp) sup| p(x,2) — ply,z) ldz. (6. 9) 


证 明 i 
至 {pr) pco0)* /1 I a1 — ped, 
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to 0) | ia 下 
我 和 逢 利 
| lel 
Ie 一 |e T 太一 De i 一 i pl =- 上 ， 


pp pp ph 
于 扰 
eenpers ae = facperr. ydr 
一 | eee 一 petz)? (rz)dridz 
一 去 人 — psl 中 | (rp Cplrzydrids 
= 方 no 一 pil BI CP Oplans) TT poy 
a je. Ca G0 十 [planz)y plysz) igs ydrdy 


Ep) pe, — pl | fr yhdedy 《pp 


例 5.4 若 !F) 独立 痢 服从 mc0.1 ,Ar 为 非常 数 的 有 办 
连续 图 数 , 考虑 述 续 状 态 时 齐 己 氏 链 1 0 ; 
守卫 C6. 109 
】 


于 是 其 转移 密度 为 Per ” . 对 天 使 fC) 


[大 
3 


的 点 Ce,y). 记 方 种 e- =e 的 唯 - 解 为 
AH HO 


z= 有 rr 








EE 
2 
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中 于 FC 是 有 模 连 续聘 数 . 到 见 记 Crey 1 为 有 界 泛 数 .我 们 有 : 当 
Fire fw 时 。 


ip 1 piv |dz 


Ph i HE 
a ee dz + | 一 ed 
J - 下 ed 


人 
-et da -| edu 
hire 57 


/on 


™ 1 a ”1 -和 
< -ez da 十 | -er du 
| /I mV 


-四 (oa tt C1 CO— Pm. 
时 中 


| A inf Ch tr sy) — /tr)). 








(a) 站 1 7 e 了 
上 南 了 的 有 界 性 ,可 知 一 can<ssaeoo :故而 可 事 


Cp dsvp -| 


OR 1 
和 3 (1 Bn) + Bm)y < 1. 
例 5.5 若 连 续 状 态 切 氏 链 1 之 人 此 有 满足 以 下 荣 件 的 
转移 密度 pCr.y); 


PAY EY) 0 《YY 7), C6. 11) 
吉之 此 链 的 Dobrushin 常数 


Cp 1— favay. 


注意 0 < [gwdy < [pcdy= 1. 


证 明 ”由 Dobrushin 不 等 式 的 证 明 可 知 : 
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Cp)= 二 sup| ptr 一 plyz) | 
一 sup| (pirsz) 一 plyz2))dz 
a pirTml pr” 
sup| Cplrz) - gir)dz 
a peria) pl vy 


世 sup (pls) — gtzj)dz 一 ] 一 ecoaz 。 
定义 $6.3 ”及 有 转移 帘 度 pt7,y) 的 连续 状态 时 齐 马 氏 链 
: bn } 称 为 指数 Li 遍历 5 或 强 指 数 遍 历 的 ) :如 此 3 应 “(Cy) LL] 
肯 交 0,0<r 达 1, 使 得 HY 2 有 
| proy)y — pr (yldy er tanirn), (16.12) 
其 中 pCz,y) 是 nn 步 转移 密度 : 
parry) 站 Jp Cr pr yde, 


Pr) A pry), 《6. 13) 
定义 6.4 连续 状态 的 时 齐 马 氏 链 人 ,nn 宇 01 称 为 指数 遍历 
的 ;如 果 3 分 布 隙 数 户 ,pore 这 0.0 之 r 达 1; 使 对 Y x,y 有 
[POOD EY FOE m0), (6.14) 
其 中 总 人 ?是 初 值 号 一 了 的 马 氏 链 六 . 

显 见 强 指数 遍历 - 定 指 数 遍 万, 天) 称 为 六 的 极限 分 布 ,也 
称 为 思 的 平稳 分 布 , 以 此 为 初 分 布 , 就 得 到 一 个 连续 状态 的 平稳 
蕊 开 链 . 

定理 6.2 若 共 有 转移 密度 的 连续 状态 时 齐 马 氏 链 5 的 Pe- 
brushin 常数 C5) 过 1, 则 马 氏 链 指 数 六 遍 记 . 

证 明 醒 概 (5 初恋 时 可 略 去 ) 

1” 对 任意 分 布 密度 p.,p;; 利 用 Dobrushin 不 等 式 有 

| jo CIP dr 一- jacrpamce， .dz 了 | 


= fr Wry plys Ydytp (tr) — pelxr dr 
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“|p.. .1 ja" rp — pdr]dy) 


Cpl op Vr dr 一 |ecope Vir, dr| 


= 


OP 
2” 可 以 社 虹 (例如 用 上 诗 缩 映 象 原理 ) 存 在 o”', 使 对 任意 分 布 


| 5 -pe | (Cp)Y", 
如 下 的 “不 变性 ”: 


密度 有 


lp pr, Yd 一 - oo < 


3"” 所 以 p* 是 分 布 密 魔 ,而且 县 有 
oy) pcr pe nda. 














由? | ec _ pty)idy -一 | p(X, ] _ DC) 中 


一 pra)p™ D(z ,yde PC ， 
在 2° 中 把 pi . + 看 成 ztx) ,并 把 xz 换 成 ,可 网 
| 
这 是 因为 有 
pers) pO = py) ~ pod dy 


< pC)dy + fe cy)dy = 2. 


推论 例 6.5 中 连续 状态 马 氏 链 当 |g (ydy 之 0 时 是 指数 工 


忆 历 的 . 
定理 6.3 设 {W,} 为 Lid 随机 列 ,f (u,v) 连 续 , 晶 关于 
单调 不 减 , 雷 设 
5 二 
= fC) Wy. 《6 15) 


[EC = 


义 如 果 存 在 xc 使 
Plsupsitr) Sr) Pn re) 0 {6.16) 
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则 连续 状态 已 氏 链 { 和 5 :Y .ra 关中 指数 加 丙 (我 们 在 中, 只 取 有 限 
对 值 的 情形 给 出 证 明 醒 概 , 对 … 般 情形 蔡 掌 所 了 测度 论 的 知识 ,就 
不 难 排 广 此 证 明 ). 
证 明 梗 概 
1” (1 首先 证 意 : 对 WE 民 扫 z2e 时 有 
‘be CD 
tev) el 1 (supé C4) i ps 
类 和 似 地 , 当 zz, 于 有 
a ty {infé Ca) ol, 
于 是 
人 inf Cu) < i 
IPOS) 2) — PO (Cy) SE) | 
去- Psuph (nu) > od YY Pinfb, Cu) | 


1 - 仓 ， 


和 2, 二 sup PC SP 
于 么 4 六:1I 一 汪 上 而 我 们 证 明 全 六 (1 一 8) 为 此 今 
和 Ce 一 Ar 
注意 名 (只 依 若 WW ;所 及 C0 与 i 比 ,(r) 1 是 相生 独 这 





玖 ,而 二 三 《) 间 分 布 , 利用 
Sat FE AA WY) Er)y, 
我 们 来 估计 
RB Cr SS 2) PE YY Sey! 
一 Es es -Te 0) 


一 ee 


了 


其 中 六 to)y 基 集合 4 的 示 件 隆 数 . 





/1， 
Tatlw) 一 


我 们 分 两 种 情形 讨论 : 

(1) 如 果 so 那么 

{E(t, C7)) El zj NE 号 CD) Sz) CO {inf E(u) zo). 
地 是 、 

Ti 二 EL CE, ee ene 一 Tiovea) Tati 
再 注意 到 (07) 二 f(x) ,W,), 令 在 v 辕 定时 /luww) 美 于 4 
的 反 郧 数 记 为 '，,v). 这样 我 们 有 
(Cb A) Es) = (Gr) EW)), 

所 以 

1 = 1ELC caer ew 一 Tp ew tnt wet 
下 面 我 们 引用 两 个 初等 概率 论 的 事实 ,读者 应 把 它们 作为 习题 证 
明 . 

1) 苦 避 ,7 为 只 取 有 限 个 值 的 随机 向 量 , 则 

EtgIODRE TY = ECgo Ea,n) |n)), 
其 中 玉 (4( ,让 | 四 为 随机 变量 , 它 的 定 交 为 
ECROE NY) = ECRCGDII= yy) STS» N). 
2) 车 还 有 $8,y 相互 独立 , 则 
EC — CECAE, y)) J 
在 上 式 中 取 二 OW W141) ,7 一 W ,我们 得 到 
了 一 [EVse ne EL i cap- ew) 一 Te ene ew ) |W, 1| 


< {ET ivity eee LE Cr ene ee! 一 Ts mts! ) 小 -mw | 
< [ET eee [1 全 7 ， 
从 而 得 到 A 入 (I 一生) 态 . 
52) 如 果 < 之 zo 内 要 用 {supb (4) 志 zo} 来 代 短 (1) 中 的 
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finft Gasses) 就 可 以 完全 相仿 地 证 明 加 1 所 (1 9 二 仍然 正 
确 . 

从 二 | 和 史 矶 ;我们 下 刻 可 以 得 到 入 守 (} 让. 

2 出 1 并 利用 连续 型 随机 变 赵 的 全 概 公 式 , 不 难 证 明 
PE CTI EE Cauchy 列 .而 此 对 > 为 一 八 收 效 , 其 极限 仍 是 - 
个 分 布 沙 数 而 凡 和 不 依赖 5， 记 这 ni F" '(z), 和 三 用 1' 便 得 


sup [PE Cr) 2 ， (| 
注 1， 相 定理 杀 件 可 改 为 ， 3 ze ns 
也 (supe， Pinfés, tT】 fe 0 6, 17Y 


辣 沦 稍 成 并 , 四 时 只 殖 略 作 代 改 . 
注 2: 次 似 地 ,定理 5.2 也 可 推广 为 : 苦 连 续 状 态 马 氏 链 1 :rz 夺 的 转 
稀 帘 度 ptr 满足 :于 二 ;使 Cp 之 1 ,那么 此 链 仍 是 指数 L' 遍历 的 ,此 
中 pr 的 定妆 为 
PT YY 空 |p pts yde, 





PDCrsy) 站 fp ep tz, yde, 


pifr,y) A Jpersape sv dz. 
于 是 我 们 还 有 与 定理 1 的 推论 相 类 似 的 推广 : 若 连 续 状 态 与 氏 链 1 ,nz01 
具有 转移 密度 日 满 是 ;3 mm 使 pro (zy)328(3)30, 开 |gCydy >0, 那 么 
此 链 仍 是 指数 了 遍历 的 . 

例 6.5 设 f 为 有 界 单调 丽 数 ,iW,} 为 ii.d. 列 ,和 且 上 共有 严格 
止 的 连续 的 分 布 密度 pz) ,那么 由 如 下 定义 的 送 代 列 名 所 决定 
四 人 次 态 马 攻 链 是 指数 /光志 的 ， 

"1 = 十 本 
证 明 不 妨 设 a z), 我 们 有 
Pb Sy = 6 =) 
一 CR ED Ey Pw Ey f0) 
5 和 3 





yr) 


它 具 有 密度 (7 国定 ,对 y 求 导数 )p(y 一 /x)), 于 是 
plrev) = ply — AC) min ply 一 2) 0. 

内 定理 6.2 的 推 沦 可 知 指数 六 通 历 . 

例 .4 也 起 例 6.6 的 特例 

全 6.7( 演 化 算法 fevolution algoriihm)) 

假定 我 们 有 一 -个 目标 画 数 QC 并 不 -- 定 知道 它 的 具体 解析 雪 
达 式 ,但 足 在 首 恋 量 为 任意 时 :我们 通过 实验 可 以 测量 到 Q(xr) 
的 值 为 求 驴 的 最 小 值 可 以 先 选 取 若 干 个 ( 设 为 AN 个? 初 值 , 排 成 
一 个 六 维 列 向 芋 , 记 为 .用 随机 和 沈 代 映 射 

E11 = 6 十 W,, 

三 一 《站 二 (= 1,2,,N), 
其 中 -- 促 最 简单 的 做 法 是 由 某 种 优生 原则 从 N 个 分 量 中 随机 选 
出 了 个 分 弹 来 (如 他 二 1, 或 民 =2), 余 下 分 节 中 令 C7) 二 zx,W 
一 0. 对 选中 的 分 其 可 令 ; f(z) 一 全 2 二 多 = 各 (如 ,其 中 及 适当 选 
慑 ( 苦 旬 {形式 已 知 , 则 可 用 f(r) 二 gradQtx)). 这 种 选 代 方案 
来 自生 物 跟 传 的 思想 ;x 一 (zx) 称 为 从 父 代 到 子 代 的 跟 传 ,Wy, 称 
为 变异 . 从 名 一 六 -1 称 为 演化 . 从 演化 可 以 得 到 一 个 蕊 氏 链 二 .如 
果 前 面 的 条 件 满足 , 则 5 有 -- 极 限 分 布 已 fy)， 这 还 不 能 满足 求 
Q@ 的 最 小 但 的 需要 , 为 求 minQ(Cz), 有 多 种 方法 .其 中 之 -- 是 模拟 
遂 火 方法 (前 而 已 述 其 方法 的 扩 意 ), 另 一 方法 是 加 入 融 争 机 制 , 今 

| 一 ACE + W,, 称 为 变异 ; 








上 jj) 苦 人 Q(%..1) 六 和 人) 
关 括 国力 下 若 外 (7 所 Qt&) 称 为 遗传 竞争 ， 


在 以 =1, 有 日 满足 - : 定 条 件 下 ,用 比较 多 一 些 的 概率 论 知 
识 ,可 以 证 明 在 这 种 竞 和 争 机制 下 ; 当 wp- 时 部 按 概率 收 化 到 多 @ 
习 最 小 们 的 集合 . 
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例 6 和 8 资金 摆 各 ) 
想 定 生 疾 资金 兵 在 离散 时 刻 进行 统计 . 让 于 纯 随机 机 司 | 开 、 计 
个 单位 时 刀 的 投 寥 与 产 盾 了 哆 关系 是 有 涨 落 的 ,而 上 假定 亡 们 是 优 
此 独 和 加 分 布 的 . 也 就 是 :时 刻 于 找 入 资金 了 于 年 闻 用 . 作 昌 刻 
并 的 产值 为 Are 其 中 Ja 是 只 取 有 眼 个 请 12 的 
独 并 半分 布 随机 配 明 刀 ,Ptw 一 咎 一 pp 一 00 寺 入 我们 假定 
在 时 到 十 上 投入 竺 六 的 全 部 资金 [ 记 为 名 Gi 站 来 四 时 部 分 情 
于 放 资 爹 中 的 8 机 部 分 优 C69<i10:8 到 人 十 17 时 刘 借 
fw 中 胸 ( 比例 部 分 人 1. 了 比 合 部 分 有 册 二 
请 此 .如 碟 资 ,福利 笋 等 .地 
4 }— .1. 
[EA ey. 
而 我 们 来 证 明 件 以 下 条 件 下 .这 个 资金 科 景 过 租 是 指数 遍历 的 ， 
也 就 是 它 以 指数 豪 减 的 误差 趋 上 一 个 分 布 稳定 的 情况 ,而 达 钊 陋 
机 的 动态 平衡 ， 
假定 /zk)》 关于 二 严格 还 增 ,而 且 在 .rz0 时 满足 ， 
Ok) = 0, 


af nf 
天 站 0 的 一 人 0 


站 7 
全 


Y 1 
0,R) > 
妈 (0 冯 ) 六 下- 


设 在 初 录 时 网 Cn 一 多 为 此 只 要 验证 定理 8. 3 证 出 丘 

而 注 的 条 件 (6. 17). jt g(r) 二 Bd CGI- BA 一 的 rs 那么 

2 用 和 为 非 负 回 晒 数 (8:0). 然而 ， 出 图 形 可 以 看 出 -= 

Se yo < ee 有 了 唯 - :的 交点 ， 记 这 个 交点 为 凡 , 它 注 

人 fos7 ea. 是 因为 Fr 中) 关于 是 严格 递增 的 ， 所 以 英 开 于 
中 中 严格 递增 的 ， 





人 





[ed 





利用 gil) 二 Qs 虑 gi(x)>0 易 见 ; 
a Ey 





几 6.1 


这 样 TE) Ea. 从 而 可 以 认为 马 氏 链 {6;n 守 0} 


的 取 值 区 间 为 1a， yin 
对 于 zE Laiyev], 由 图 形 看 出 BCz)stz, 记 
Be CTY 全 下 (xz), gi (7) 三 有 全 ) 


由 归纳 法 易 见 p(x) 对 递 威 ,从 而 有 一 个 极限 . 又 由 于 上 面 的 


等 式 , 这 个 极限 必须 是 gs 的 不 动 点 , 即 必须 是 a4, 因 此 
ET (Ar oo), YrE Fa,anl. 
特别 地 应 该 有 
EN》 一 人。 
{ee aw "YY 
于 是 3 no; 使 | 
Em CaN) < gym (a), 
并 且 对 zo 和 [ge (Can),gn" tq)] 有 


PC sup, br) 20) PC sup 和 xz) Sp" an)) 
pn 9 之 工 瑟 a 


he 


一 


- 空 本 (zl 二 1 一 1) 


= Pw 


| 


DPlw,, = 1) 


一 pi™. 
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类 似 地 
PE inf & (rE) inf Ea Cr) 2 BNA)) 


Pl = Ns, = N) 

— Pu, 
服 =px™ pi“. 可 知 定理 6.3 后 面 的 注 中 的 (6,17) 条 件 满足 ,内 
此 以 [eseas] 为 状态 空间 的 马 氏 链 { 人 :之 0} 为 指数 遍历 的 ( 记 其 
极限 分 布 晒 效 为 严 )， 


8 6.3 AR 模型 (线性 自 回 归 ) 


上 下面 讨论 
为 id. 随 机 变量 序列 }， 
这 时 候 在 $6.2 中 的 梁 数 x) =r 是 线性 卫 数 ,因而 不 是 有 界 
的 . 它 不 满足 例 6. 6 的 条 件 . 对 此 我 们 有 
命题 6.4 如果 瑟 .有 界 且 有 密度 , il <1 ,那么 存在 分 布 是 
数 产 (y), 使 


『 _ pir,y)dz — fF (yy) (rT oY 7), 


其 中 有 = zn. 
证 明 ”经 过 迁 代 我 们 有 
WW 


邻 ,= 十 Wi 二 AW 二 和 -iW 那么 总 与 夸 同 分 布 . 由 于 亚 , 们 
是 有 界 的 ,<1 ,所 以 


E ~ Sw, Ee oo 00), 
这 里 的 收 全 性 这 样 理解 ， 


M 四 
E| > XW -- 2 PW | CN < M) 
r= CA 





Ar 
二 
wir = -| 
wl 四 > 
< > aA (LEW, ， 外 十 - Wi, +1 yA2 
mm! 
了 
一 >， [3 0 (车 和 -二 


可 见 二 是 几乎 处 处 有 限 ,并 用 
i 全 £| Vv A 1 人 | 说 ( 若 A 人 va 
再 由 hebecher 本 等 式 有 : 


过 2 | 1 
Pli Wo. 0 (一 





后 是 所 的 分 布 函 数 -x&" ;的 分 布 消 数 产 "' 从 而 6 的 分 布 汶 数 
| PICryzygs 所 (Cy) 史 见 ,由 定义 下 与 无 关 . 
注 1: 关上 这 - 段 讨 论 的 严格 数学 园 辑 推导 ,读音 可 参考 [YWL1 
注 2， 这 个 铺 打 可 以 推广 天 多维. 设 1 是 R* 中 有 界 的 独立 屋 分 布 随 
La 各 刘 rE RR 
j- 一 了 阵 )， 
| 二 一- x. 
如 各 3 的 特定 值 的 烧 均 小 于 1, 那么 傅 是 6.4 的 结论 也 正确 (证 明 方 靶 类 
似 ) ,更 昌 判 唱 的 是 : 设 1 4 < 过 1: 其 中 上 4 是 第 阵 4 的 欧 还 模 ; A? = 
a 1 人 4 的 结 沦 正 慷 .让 称 为 的 极限 
分 布 , 身 证 总 是 连续 状态 马 氏 链 , 并 以 严 "为 其 平稳 初 分 布 . 这 方面 的 详细 
讨论 还 了 可见 fbWw]， 
说 明 : 注 1 中 的 条 件 as 各 1 .41 过 1 保证 了 
A CA%H (le <， 
从 而 保证 了 售 ,} 的 极限 分 布 的 存在 . 这 里 外 - 上 有 性 质 ‖ 4 五 上 去 
放生 可 以 由 
| > esp 上 过 [os Vo,’) 





得 到 . 
例 69( - 维 疡 阶 -RR 寞 型 并 可 和 驳 芍 第 八 辫 ) 
= a a p11: 
CH. 22) 
其 中 iW 为 请 中 访 放 dd 到 二 有 界 ( 有 异性 大 这 里 为 简化 而 多 加 


的 条 件 i 本 人 ,二 一 
这 个 模型 可 流 改 写 为 向 起 形式 ,利用 


产 
Yl, 





1 
i (06. 23) 
= 1 é, 上 
1 
| 
名 会 | ， ， 
[&, 1 
则 上 上 式 成 为 下 维 向 量 方 程 ， 
i sr "| "| 
] D ! nn | 庄 凡 
Pe 一 | » i 十 。 | 一 怒 多 十 Eu . 1， 





| 
这 里 的 年 阵 4 的 形式 称 为 自然 典 则 形式 , 它 的 特征 和 多项式 为 下 述 
行列 成 

dettA Md) (CIA dp A pe 
折 以 只 要 守 一 0 的 根 均 在 |41<-1 中 ,大 么 7 有 
不 依 粮 z,… ow ,极限 分 布 ,我 们 把 它 记 为 天 因而 其 分 大 3 
也 有 不 依 类 .0，…w， 工 1 的 极限 分 布 ， 我 们 把 它 证 为 天 全 邯 
连续 状 ， 人 


2 








而 总 不 是 马 氏 链 ,但 是 它 是 一 个 户 维 马 氏 链 六 的 - -个 分 量 , 称 为 
瑟 步 马 钱 链 . 

注 1: 利用 4 的 Jordan 标准 形 , 不 难 证 明 若 4 的 特征 根 的 模 均 小 于 1 
于 ,一 定 存 在 je, 使 中 A%w 二 1. 

注 2， 稍 用 一 点 闫 格 的 概率 论 的 知识 (Borei-Cantelli 引 理 及 强大 数 律 ) 
可 以 证 明 人 在 命 感 4. 45 多 维 情形 ) 中 , 苦 糙 条 件 "W。 有 界 " 用 "3 o>0 使 Ete 
并 人 代 幸 , 则 结 沦 仍 儿 正确 . 

AR 异型 可 以 很 好 地 用 来 对 于 语音 信和 号 所 代表 的 语义 作 人 工 
识别 , 有 人 认为 表明 语 将 信和 号 的 语言 信息 主要 包含 在 系数 参数 
farareodo) 中 ,而 " 残 差 "W 则 包含 了 玩 儿 的 说 话 人 的 信息 ,如 
果 不 仅 要 知道 由 信和 导 代 表 的 语言 依 义 ,而 且 撑 要 知道 是 娜 一 个 人 
说 的 ,下 一 千 ( 8 6,4) 中 的 ARMA 模型 提供 了 -- 个 有 价值 的 途 
径 . 但 也 有 实践 表明 语音 信息 与 说 话 人 的 信息 都 包含 在 足够 离 阶 
Cp 大) 的 AR 系数 中 . 如 何 选取 ,这 是 应 用 时 间 序 列 广泛 讨论 的 
一 个 问题 ,有 许多 不 同 的 统计 方法 . 确定 了 p 如 何 信 (aj ,as;…， 
Qs)? 我 们 将 在 第 八 章 中 作 简 要 的 介绍 ， 

对 AR 模型 .ARMA 模型 的 进一步 学 习 , 读 者 可 以 参考 时 间 
序列 方面 的 有 关 壮 作 , 如 [X1,[Fu] 等 . 


36.4 ARMA 模型 


ARMA(p,2) 是 一 个 非常 广泛 应 用 的 近似 模型 , 它 的 数学 表 
达 为 ， 
和 一 Qi 十 十 Wp 
+ EW Ws (6. 24) 
其 中 庆 g 一 pp, {W,} 是 iid. 随机 变量 烈 ,而 且 与 随机 向量 (&,， 
-1) 相 互 独立 , 这 里 为 了 避 开 技术 性 的 困难 ,我 们 还 假定 {WV} 
是 有 界 随机 变量 列 ， 
我 们 把 (6. 24) 改 写 为 (n 守 0)， 
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Fl 2 下 让， < 下 
1 Th Dy 0 ol ; | | ( 
a | “ | 
| 记 , | 0 | 
0 We 
Ma 二 是 总 总 “ , | Ws 
Wp: 
[Oe | 们 1 ny [| 站 
a I . 
站 1 全 ， | 0 
i, 253 
并 且 它 简单 地 记 成 
"| 一 Es (6, 25) 
和 De 
其 中 心 代表 元 素 全 零 的 矩阵 
局 Uy YY Hp 1 dpi ph, i 六 
总 总 0 
DD ......... 总 
4 一 . 必 ] 0 1， 二 二 , 
| 10 . ol 
站 全 1 总 
0 0 0 9 
| 
1 0 0 0 
C 一 


lo 0 1 9 
1 {WO OH 0 O07, 
这 就 纳入 了 (6. 23) 的 框架 . 注意 
det| [2 “| 一 | 一 de 一 MD ay 
MO CC! Tt! 
= ad a A 


所 以 只 要 1- ai 一 一 0 的 根 和 满足 44 过 上 那么 六 就 有 
不 依 闵 初 值 的 极限 分 布 , 折 和 们 把 它 记 成 
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下 (fi ye 
从 而 我 们 知道 总 有 一 个 极限 分 布 FCy) ,而 月 
Py = Fy, + ot 0) 
本 音 的 讨论 居多 涉及 与 氏 链 的 指数 遍历 性 及 指数 工 ! 遍历 性 ， 
这 种 收效 性 琶 求 并 不 太 强 , 在 实际 问题 中 有 时 要 出 到 小 强 的 收 合 
性 (如 概率 收 部 , 概 襄 为 1 的 收 仇 ), 这 和 就 需要 更 多 的 概率 论 知 识 . 





坷 题 

















1 设 1W ,为 Li.d, 询 . 具 有 正 连 续 和 密度; 凡 名 11 一 了 (6,) 十 
WCmod 人 氏 链 .为 指数 1 遍历 的 . 

2， 设 (W,! 为 正 iLid. 列 ,具有 连续 密度 6, 叉 车 有 0<<a&/ 

ab, pe J 如 连续 状态 马 氏 链 {5,:# 实 0) 为 指数 工 ' 人 遍 访 
的 . 

3， 投 1 呈 为 直列 ,具有 正 连 续 密 度 e, Pr)>0.g 有 
界 ,/ CE 一 8 十 HH, 则 连续 状态 马 氏 链 上 是 指数 万 遍历 
的 . 

4 _W, 如 前 , 沁 其 分 布 密 度 为 p(y). 学 >0, 又 若 当 工 固定 后 
没 Az 2) 的 反 国 数 为 Ar) , 且 满 足 3 g(y)220 使 oryy)) 沁 


了) 则 马 氏 链 上 指数 二 遍历 ,其 中 &, 出 下 式 决定 : 





二 .| 二 Er 
一 1 1 

5 设 W, 为 iLi.d， 列 , 古 ,一 1 了 工 | 令 
2 2 





fry = 1， 工 和 [一 2.0]; 
Tl, rE[o,2], 
al = Ew. 
1 





的 解 生 记 为 所 (zy 证 曲 : 
f， 


EC) | 


失当 ceL 2.04j 寺 ， 


各 ~ | -= 


6 在 天 是 由 ,和 葵 sr 


| 


Pla Co Iv 
设 Wi 太子 姑 题 5 俱 是 请 数 六 定义 如 下 : 
jf), 


ft 了 一 


i 


i 02 


1 


bn 


i i 二 211 
0.5 NN.5 1 


遵从 [- 1.1 均 人 分 布 ,证 明 对 了 ,ze 
iid. ,其 分 布 密 度 ( 不 依 环 } 

2 Sy i 2) 

rE 一 2.2M\( 8.6); 

， Et 06,0). 

EF 明 ;: 当 万 [ 一 了 1 财富 1 为 





相应 于 六 的 有 记 为 名 ,这 
iid- ,于 


J 全 1 一 ]，-- 全 | 
EY ~ TE ,8)}, 
Rs [1 ]， 


而 当 EE 2.2 Ni 1 jC 


六 


人 


EY) ~ 4 
8.。 证明 槐 6.3 中 的 
9 以 例 6.9 中 的 名 
10. 


£, | 
求证 信和 yn 宇 0) 为 正六 马帮 
1 设 A Ca) B=- 


EA 


A 


- 
EA 


为 站 月 

TE [2,.-. 1); 

FEC,2;, 

? 是 连续 状态 蕊 氏 链 . 

为 模 本 ,给 出 步 ( 连 续 状 态 } 志 下 链 的 


设 iW.} 为 Li,d, .共有 分 布 窜 度 oCv) ， 
ES, = FE 性 





1 十 下 

一 

链 ， 

Ch 让 为 #9 阶 方 陡 . 令 囊 阵 的 模 的 平方 
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六 * 


后: 为 其 全 体 元 素 的 平方 和 , 试 证 明 : 

《1 人 下 41 妆 和 4 人 下 呈 ， 

(2) 对 任意 的 4 维 向 量 二 , 令 xf 一 yx, 则 
La41 = sup |Ax|. 


3) 141 =e<1,| DAd'z|e |. 


1 一 ae 





= 明 





第 七 童 ”平稳 序列 、 保 测 映 于 与 过 廊 论 谍 步 


兴 当 中 上 右 , 本 章 内 容 源 于 平稳 态 统 计 物 理 与 平稳 过 程 ( 序 
列 ) 的 研究 . 全 是 ,近年 来 从 动力 体系 的 研究 已 发 展 出 一 个 独立 的 
站 要 学 科 一 和 遍历 论 . 它 在 不 线性 科学 等 领域 的 研究 中 起 了 重要 
作用 . 大 部 分 随机 过 程 的 教材 不 累及 这 部 分 内 容 .但 笔 形 以 为 , 平 
束 马 氏 链 是 这 部 分 内 容 的 -个 极 好 特例 , 它 具 有 和 典型 任 , 对 于 理解 
与 汰 识 - 般 概 盒 与 理论 很 有 启发 性 , 声 则 随机 过 程 与 忆 毛 论 两 者 
的 思想 方法 条 以 相辅相成 , 看 来 ,它们 在 更 高 -级 水 竺 上 的 结合 : 
和 近年 来 ,并 将 是 今后 若干 年 内 的 一 个 新 动向 为 此 ,本 节 中 我 们 设 
法 将 这 个 领域 中 的 基本 概念 与 部 分 基本 思想 在 本 章 作 一 个 简要 的 
讨论 . 


37.1 平稳 序列 与 保 测 映射 


让 我 们 从 平稳 马 氏 链 这 个 特例 出 发 . 

例 ?7.1( 平 稳 马 民 链 ) 设 8={6;n 一 0.1,-…) 是 一 个 入 状态 
的 时 齐 马 氏 链 ,P= (py) 是 它 的 - - 步 转 移 阵 . 由 $$ 3.3 定理 3.13 可 
外 :一 定 存在 不 变 概率 分 布 g 一 Cm、… ,rw) ,使 得 (3. 19) 

mp 二 Xx (lj 人 NN) 
成 立 . 再 由 命题 3. 10, 就 可 知道 ,车 以 + 为 8 的 初 分 布 , 即 
PD) = = RN). 
由 对 任意 的 & 六 时 刻 Ris ys {6 {RO se » bu, Cv) } 与 
i 部 辐 分 布 .从 而 ,5 与 VA tw) sn 二 0.1， 
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… 同 分 布 , 包 就 是 过 的 分 布 对 时 间 推 移 不 变 . 这 种 对 时 间 椎 移 分 
布 不 变 的 忻 质 叫 做 平稳 性 . 下 面 我 们 给 出 一 般 定义 . 

定义 7. 1( 平 稳 序 列 ) 随机 变量 列 { C07;n 之 站 旭 时 满足 
让 述 条 件 则 称 为 一 个 平稳 序列 ;对 任意 的 整数 主 1 与 ; 宇 1 及 时 
庆 nw 地 同 分 
布 ， 

定义 7. 1 (平稳 过 程 ) 随机 过 程 答 (ow) yt 宇 T} CT 一 00) 
称 为 六 区 的 如 果 对 任意 整数 关注 | 与 ; 半 T ,及 时 刻 ni， {Cb. 
CD ;部 辐 分 布 . 

例 7.2 若是 例 1 中 的 平稳 蕊 氏 链 ,与 (一 1,…,7) 是 
实 消 数 : 则 {6 CoD A 二 0; 1 与 1 有 (Co ,os 
CA :nn 一 011,) 分 别 是 玉 稳 的 实 值 与 x- 维 向 量 值 随机 序 
列 . 

例 7.3( 马 氏 链 生成 的 符号 动力 体系 及 对 应 的 保 测 上 映射) 

对 了 例 1 中 的 平稳 马 氏 链 站 令 5 全 1 人 12) -TOw， 
于 任意 刺 数 坟 守 1 0 a, 5 
5; 我 们 再 令 

A Oe 口 ,3 
且 对 于 4.…。 定义 概率 : 
忆 (4 = mo poo passs "Pa, so, 
于 是 类 似 于 第 - - 章 8 1. 3, 我 们 可 以 有 -个 事件 体 .万 ,及 上 定 
义 的 概率 已, 即 有 概率 空间 (2, 色 ,PP). 令 :4 一 (4,) 是 一 个 NN 阶 方 
阵 ,其 中 





a {1, P(E = jlé, =72D 全 0; 
” lo, PE = jl = 0. 


必 


他 Too Ce 0 是 和 了 工 } 


宪 易 证 明 PC9) 一 1 令 过 =14m2:4e .1 于 是 我 们 可 以 得 到 
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概率 室 间 C2. .六 ). 

今 名 (一 皮 : 则 售 .5w) 0} 就 是 一 个 例 7.1 中 那样 不 (2 7) 
[的 平稳 马 氏 链 . 再 定义 人 2 上 上映 时 6 

0 fe fo s)he A ,ee), 


我 们 基 察 下列 集合 ， 
局 站 -Te 人 有 ， ! 


Oo a A a 
一 国人 
一 1 


由 8 的 耕 稳 性 辕 知 道 : 它 的 法 索 
PAO A = Pligg) = An ts — dn}) 
一 
0 
= POA, ,a ), 
二 式 说 明 在 映射 9 下 ,集合 4 .的 原 象 集 的 概率 与 4 .… 的 
概率 相同 . 可 以 证 明 对 ,也 中 的 任何 集合 4 部 有 性 质 
PtB A) = POCO. (7.1) 
也 就 是 在 映射 6 下 .六 率 (也 称 测 度 )PP 是 保持 不 变 的 . == {C0,， 
e112 人 5 与 各 十 的 映射 8 称 为 -- 
个 符号 动力 体系 .0 也 称 为 推移 映射 ， 
定义 7.2( 保 测 映 射 ) 设 有 概率 空间 (@. ,让 及 x0 的 
映射 8, 使 得 对 任何 4E .2 ,前 及 'AE 2 而且 保持 测度 相等 ,P 
(0 和 一 C4), 则 称 旭 是 -个 (和 8 之 ,P) 圭 的 保 测 映 身 . 
例 7. 3 中 的 推移 趴 射 训 扼 见 赴 保 测 上 喘 射 的 - -个 典型 例子. 
命题 7.1 设 86 是 (0 , 记 ) 于 的 “个 保 测 上 映射 ,Ew) 居 (， 
的 任意 一 个 随机 灾 量 , 今 Ea) EC E (Cw) EY), 
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王 . 


1 是 -个 平 
稳 序列 . 
证 明 演 审 
A | 加 Co Ti) 
wt 
= 
人 2.14. 
显然 AE .7 ,由 4 的 保 测 性 假定 ,我 们 有 
P(A = P(8 ,4) = P(A). 
由 归纳 法 易 见 ， 
POAY= Pr14) = PCO 101AN) 
一 下 (人 (gay Sse bbw) ry}) 


一 天 (ff Er, KG 
一 fc 所 on 2 ew) A 2 ) 
一 Pal (ty) SATs, a EA) 


证 见 (ECDs 1Cw)) 与 (CC) ,yi.(w)) 是 同 分 布 的 . 又 
由 于 (CC) so 如 《ww 的 分 布 上 只 不 过 是 (Cw) ,Cw) (ww) ) 
的 边缘 分 布 ,从 而 (Co ,5 Co) 与 (6 0) ,61s(w)) 也 
全 是 同 分 布 的 , 即 寺 是 一 个 平稳 序列 ， 

土 商 这 个 命题 说 明 (0,.F,P) 上 一 个 保 测 股 射 8 与 (2,. 多 ， 
情 ) 上 的 任意 一 个 随机 变量 如 Cww) 都 可 以 生成 一 个 以 &6lxw) 为 初 值 
的 平稳 序列 . 相反 地 ,事实 上 对 任何 一 个 (号 , 肌 ,PP) 上 的 平稳 序列 


(Cw)} ,都 可 以 构造 一 个 概率 空间 (0 ,PP) ,及 其 上 面 一 个 保 测 
映射 6 和 与 如 (0) 同 分 布 的 一 个 随机 变量 E(w) ,而 且 只 要 仿 
EC0) = EF) 一 了 (boy， (7. 2 


就 有 15tajia 一 0,] 2 与 0 有 1.2, 同和 分 布 .在 这 
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个 重文 上 我们 可 以 认为 平稳 订 列 都 是 由 保 测 映射 生成 的 .也 职 
是 说 半 稳 序列 与 保 测 映射 让 实际 上 是 互 机 对 应 的 . 


7.2 Birkhoff 遍历 定理 


rkhoff 录 房 定 埋 是 保 测 映射 种 稳 序 别 最 深刻 的 基本 性 质 
之 一 . 它 具 有 广 少 的 应 用 . 在 本 节 中 ,我 们 将 从 分 析 平 稳 马 氏 链 这 
- 冬 殊 情况 下 的 相应 结 傈 出 发 ;进而 曾 述 一般 保 测 野 射 与 于 稳 序 
痢 的 Birgholf 澳 亡 定理 及 其 意义 . 由 于 此 定理 的 证 时 涉及 较为 深 
入 的 测度 论 二 只, 它 已 还 近 超 出 本 书 的 宗旨 与 水 平 ,我 们 只 能 略 去 
它 全 有 兴趣 的 恋 者 可 参考 有 关 李 藉 (例如 , 笔 兽 所 写 的 + 随 补 过 程 
引 论 》 -: 答 》， 


1. 有 限 状态 平稳 马 氏 链 的 Birkhoff 定理 


考虑 7.1 中 例 ?7.1 与 例 7.3 中 的 有 限 状态 马 氏 链 及 相应 的 
保 渊 映射 , 即 考虑 概 尝 空间 (0,.27,P) 及 其 上 的 入 状态 瑟 民 和 链 攻 
二 (7), 其 中 记 











SC= {2 Ni 
2 一 {ow 一 - Cs 后 SA = 口 , 1 2， 


tC (ew) i 
0: Or sy) es 
Pl) = jm) 7) — p,, 
一 Pe, (tw) — 7). 
由 $3.4 TD 对 于 Ce 的 常 返 状 态 应 该 有 . 
lim 二 $Y fs) = = DD. 《7. 3) 
A 
而 其 中 是 所 在 的 迪 返 奖 ， 4 = 7 li 二 > (1 
nn EE 


我 们 还 知道 , 当 {$Crw)) 是 一 个 所 通 的 有 限 状 态 与 氏 链 时 ， 对 于 任 
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记 的 i 和 NN, 有 ,一 而且 x 会 (wel) 是 5 二 人 61 哈 -的 
不 变 概 率 分 布 . 从 而 对 于 所 取 有 有限 个 值 的 平稳 不 可 约 马 氏 链 就 有 
im 1 No) = DL Dn, 


jE 


= NOm— Ef)), (7.4) 


如 果 48 县 有 若 于 不 可 约 常 返 类 五).……,11., 由 定理 3.15 后 的 说 
明 我 们 可 以 在 出 
1 EH 
”110 当 关 常 返 晶 1.,j 在 不 同 个 常 返 类 时 . 
另 -一 方 加 , 若 # 是 (zy, ,ww) 是 {65} 的 平稳 初 分 布 , 则 --- 定 有 





pur 一 Xt 而 入 由 归纳 法 易 得 到 ,对 任意 的 # 宇 1， 


Dy ptn)n, 二 >， >) prputn 一 13 一 >) pi 一 并 
1 一 | r 一 1 下 “上 让 一 | 
再 利用 定理 3. 12 ,对 于 常 返 目 rwjE HH 应 有 


lim 二 > pf = ,A 
Hn 六 1 
由 此 就 得 记 
四 a 
1 ~ -. 
Wo PD DR = DI Ana,. 
1 二 了 工 -1 re, i 


(7.5) 
其 中 心 二 jt 将 ?扩大 定义 为 ; 


ET, 
Cy -— 他 IE Hs 
0， jE I. 


A i 一 ， . 
$A ee) 于 是 一 Dwr 中 ,因为 Na 一 1, 可见 
一 ] 是 


任何 {6,} 的 不 变 分 布 都 是 3,… ,x 中 的 凸 线性 组 合 , 全 体 不 变 概 
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亭 分 布 的 集 台 名 是 的 西 线性 所 外 (对 三 可 效 状 态 的 二 
氏 链 .这 也 意味 着 对 于 非常 运 状 态 瑟 有 丈 =0: 从 而 可 和 在 因 “全 

平稳 与 上 慌 链 . 队 莫 党 氨基 态 册 发 的 概率 必须 是 0 访 轩 (7. 3) 式 就 
章 哑 养 碾 不 晤 的 常 返 类 出 发 人. 鸭 有 斌 的 械 限 基 厅 国有 榴 ; 


jm | \ FE 和 Em) € Hy. (7.0) 
站 mn 


和 
对 天 于 许 弓 5 用， F 到 村 作 
bw EE Th wt EE Iv 人 0 
之 周 吕 并 令 测 焦 , 可见 2 在 山 射 #8 下 是 概率 为 1 地 不 恋 了 的 , 妈 
了 CD 《7.7) 
以 后 简称 概率 为 1 地 不 变 的 集合 为 不 变 集 . 于 屁 (7. 5 可 改 始 为 ， 
以 概率 为 1 地 成 学 起: 


lim 1 fiE, (Cw)) 一 Si) 2 0} ~ xr. 07. 8) 
"0 1 


一 7 


将 (7. 5 冰 右 端 记 为 gto) ,那么 它 好 以 轨 率 为 1 地 满足 


' 


So) 一 Do (lo) Ya f(y) = Wy, nu) Dg) 


» -| 业 1 上 
-Vi sa, (Cw) A A = gl). (7 9) 
Fe 


如 果 和 将 产 -入 co 让 为 Ca， 那么 
HE mW) = FE Caw)) — = g(t), (7. 10) 
于是 (7,8) 伍 (7. 0) 就 丁力 8 表示 为 :以 概率 为 1 地 有 


] ~ 

lm 机 #0) 一 gg (ew). 7,.11) 
1 

gw) = g (Cw). (7. 12) 


企 (7. 1 两 端 分 别 东 数学 期 望 就 得 到 


LY 一 I: 1 了 rr 
Ea (w)— lim 了 Vg re 





上 
| 


= Ellim 二 ee — Eg (oa)， (7. 13) 


(7.13) 中 数学 期 望 与 极限 运算 可 以 交换 的 原因 是 g(rw) 一 
Cerw))，- 具 只 有 有 限 个 相同 的 联 值 ,从 储 

Eg(ltw) — WYP Cw) = 7) 
无 非 是 一 个 有 限 项 线性 组 全 运算 . 它 当 然 可 以 与 有 限 运算 交换 次 
序 ( 应 该 指出 的 十 : -能 来 讲 , 椒 能 随意 将 数学 期 望 与 极限 运算 交 
换 次 序 )， 

上 面 我 们 再 来 看 随机 变量 g(o) 在 什么 条 件 下 能 像 57. 4) 中 那 
样 以 概率 为 1 地 不 依赖 于 初始 状态 如 Ca) ,而 是 简单 地 等 于 Eg (w) 
(由 如 的 平稳 性 ,对 于 任意 na 六 0, 它 应 该 等 于 EACE,(w))). 仔细 考 
查 57. 8) 式 就 可 发 现 


gl Salw) > ro 
点 站 1 




















= Do) > 0 《〈 见 (7.5) 式 ) 
4 一 了 了 


2 


‘EH 


2 To, C0) PE) = jE Hilt € HVA) 
一 | 了 


一 21o(o) BPE) = YAO). (7.14) 
于 一 1 1 


也 就 是 说 g(w) 在 每 -个 i; 上 ,其 实 是 A (0)) 一 g tw) 在 人 和 闪 


(各 Co) 生 召 由 中 的 条 件数 学 期 望 , gw)? 烽 率 为 工地 不 依赖 初 状态 
botzo) , 当 且 仅 当 有 一 个 名 ,使 2 一 Po(w) = jE He) 一 1 


也 就 是 刀 (w) 以 概率 为 1 地 集中 在 一 个 不 可 约 常 返 类 中 . 这 时 不 变 
集 人 2 的 概率 
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1 了 及 -一 开 ，; 
PON, ) 一 不 ,一 i 
人 ”10， 其他， 


也 就 是 不 变 集 合 只 可 能 是 概率 为 0 或 1 的 集 人 台 . 反之 , 若 P(40 一 
Ya, 0 对 天 个 或 两 个 以 上 的 二 成 立 ,那么 (四 一 定 依 由 初 状态 


poo). 进而 我 们 还 可 以 看 到 57. 117 中 的 gw) 并 不 一 定 必 须 是 
了 Ce) 这 种 形式 的 .车 
REm) 二 的 (oo 
(47,1 仍然 成 并 ,要 证 明 这 -一 点 ,只 要 今 
Dd) En ), 
答 易 看 出 (oo) 儒 然 愉 能 磋 有 限 种 不 同 状 态 CN”™t! 种 ) .而且 
下 
= PE) jar ba CH) = GO 0 = ss 
El mi) 一 io 
{Ps 站 
”leo， 其 他 . 
钱 19?fe) 1 仍 是 -- 个 有 限 状态 马 氏 链 ,而 日 
DA {ome) € Hr = (onl) € He 


对 {7,} 是 不 变 集 .而 和 且 Q, 与 凡 概率 为 1 地 相 等 ,从 而 也 是 {1 
的 不 变 集 , 于 是 对 1%,《w)) 仍 可 再 用 上 面 所 得 结果 , 注意 到 
Pm) = Corvin = 一 
= pin pr pp 


和 四 


Plwsna( wo (rr I) 一 To pn pp, / Y， xt 


Ei 


= qt) 
~ A pr pp rm? 


将 07. 1 与 (7,13) 由 于 {和 %} 及 它 所 对 应 的 g 号 以 概率 为 ! 地 得 到 
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lim = SY p(w) 一 g (wy 
= Ola) POR = Gerri ACR) 


本 2 la Ce , >, Ti Pi Pr Pp 1 pi 


dd mn 
el ny 











go 一 gpo)( 也 以 概率 为 1 地 成 立 ). 并 且 还 有 
Eglw) 一 Eg (ww)， 
进 而 进 有 : 站 由 之 人 时 , 
2 PO (wo Cn sn) [OF Cor vj) 





= FECA EY = Ela Cw) | ). 
2，Birkhoff 遍历 定理 


上 段 中 我 们 得 到 的 关于 有 限 状 态 平稳 切 氏 链 的 结果 对 于 一 般 
的 保 测 映 射 及 半 稳 序列 仍然 成 立 , 这 就 是 著名 的 Birkhoff 遍历 定 
理 . 王 面 我 们 给 出 这 个 一 般 定理 的 阐述 及 应 用 ,而 略 去 其 证 明 . 
定理 7. 2(Birkhoff 遍历 定理 ) 设 8 是 概率 空间 (0 ,P) 
上 的 一 个 保 测 上 耻 射 ,go 是 5, 到 ,PP) 上 一 个 具有 有 限 数学 期 户 
的 黎 机 变量 , 则 
1)》 极限 
lim 二 Sg pe) = g (w); (7. 15) 
以 概率 闵 1 地 成 说 ; 
2) g(9w) 二 p(w) 以 概率 为 1 地 成 立 ; 
3) Fg (wo) = gw). 
其 实 定理 7. 2 的 结论 止 是 (7. 11) ~ (7.13) 的 翻版 , 这 里 的 
ER (my 可 以 比 ea sto oo 这 种 形式 更 为 - 般 . 
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推论 芳 吕 CC 有 满足 PIN 一 PIG 一 0 刚 对 
的 未 性 孙 数 总 有 有 
Ecg(ala) — Ecg ww)la). (7. 18). 
注 : 用 测 庶 论 的 庄 音 米 刘 7.157 就 古 说 gD) 起 (0) 对 全体 不 变 集 记 
腊 隐 事件 体 5 代 枚 ?的 条 和 件 期 让. 
推论 证 明令 8(o) 一 eto)ra to. 于 下 以 概率 为 1 地 有 


1 >， g {ow + 和 EA) (ew) ! > g (Hou) Ty (wm) 
? A 于 . nn 1 


Ca) 
六 oh 部 只 基 -个 概率 为 0 的 集合 (条件 ). 从 而 
写作 的 示 性 因数 当然 也 是 以 概率 为 1 相等 的 ). 于 是 由 定 埋 7,2， 
我 们 得 汉 


gw hm 二 > # {Hwy = (im 过 Da (wi 
”7 n=l "rr £1 


tp Cy, 











骨 由 玉 g tw) 一 上 gtw). 便 推 中 有 
hg Cdn (wm)) = Eg (w}— ECglw) ls le)), 


下 而 我 们 研究 g Cw) 何 时 与 初 状态 匹 闫 ,而 代 是 非 随机 的 ,于 
给 市 不 变 寄 与 志方 平 稳 分 布 的 一 和 股 概念 ， 

定义 7.3( 不 变 集 ) 对 宙 件 (集合 )4E .< . 称 4 村 保 测 映 射 
是 不 变 的 ,如 于 人 NM POIANA) 0. 

定义 7.4 没有 概率 襟 间 (Q..5, 户 及 共 上 的 保 测 蜡 庄 8, 陈 
慨 率 产 村 由 是 裔 丰 的 ， 如 朵 避 的 不 变 集 的 役 谭 砷 介 则 为 1( 也 称 8 
方 焉 谓 矶 的) 如 全 总 (oo 一 EC)， 这 时 出 称 12,} 号 遍历 的 ， 

定理 7.3 在 害 香 ?.1 路. 瞩 使 对 于 任 旋 友 丰 有限 数学 期 思 巾 
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随机 变量 g 都 以 概率 为 1 地 有 gw) 一 Egkw) 当 旧 仅 当 9 是 己 明 
历 的 . 这 时 
lim i Pate) = Eg(w). (7. 19) 


这 意味 着 沿 负 道 的 时 间 平 均等 于 空间 的 慨 率 平均 信 . 
证 明 (1) 当 呈 对 8 遍历 时 ,由 于 PP(o:g(o) 一 &Cbo)) 一 1， 
我 们 有 
Plw:g (Ww) 二 pg (Bm) = Plwg (He) STE CW)) = 0. 
可 见 {w:g(w) Sx} 是 一 个 不 变 集 .由 于 了 对 6 遍历 ,就 有 
Piw:g (wo) x} = 0 或 1. 
令 一 inf(rsP(o:g(o) 近 2 一 1), 则 
Plwsg fo) Ev) 一 1， Pg (wo) 过 有 一 0 yy) 
可 出 
Plwsg (0) = 9) = limPlosy — eg (wu) Em) 一 1 


而 且 以 概率 为 1 地 有 加 一 五 glw) = glwm). 


(2) 设 任意 的 具有 有 限 数学 期 望 的 g 玫 使 8 (wm) 二 EE gCw), 现 
在 来 证 明 P 对 4 遍历, 设 4 是 6 的 不 变 集 , 令 它 的 示 性 消 数 为 
g(twm) 一 Jatw). 由 于 8 是 保 渊 映射, 就 有 
PlcB "NT A = PUP TAN TD) = 
~ PUB AWN\A) = 0., 
PA IANO AN) 一 … 一 POAETIAY) = 0 
令 Q= {ogg lw)} (一 1,2…) ,于 是 
PU)= 1 — Plw:g(w) 天 gi)} 
六 1 一 FPCCG tiAYIN\ OAYY 十 PaO nA CO "TA))] 





月 令 科 一 :8 gE (| 02， 就 本 
FDC 一 PC 一 上 
另 -方面 ,在 中 CPC. 一 1) 有 
人 Ew) = gC), 
可 见 
有 ftml 一 tinmn 2 Ni gfe = g(tw) := 了 Co) 
We 上 -1 
以 构 率 为 1 是 成 站. 出 所 设 就 得 到 
Tw = gw Egtw) 一 下 (4 
好 PC47=0 或 1 由 此 可 和 邦 天 对 如 电 历 . 
从 定理 ?7.3 反 过 来 看 有 限 状 态 的 平稳 蕊 乓 链 ,可 以 看 出 平稳 
马 氏 链 的 平稳 初 分 布 x 集 中 企 一 个 不 可 妇 芝 返 状态 类 时 , 它 对 应 
于 遍历 的 情形 ;友之 当 x 在 两 个 或 两 个 以 上 不 呵 约 常 返 类 十 都 有 
下 测度 时 ,例如 设 在 2 与 ,于 x 均 有 正 测度 ,十 基 
= wd) EE Hi 对 Yn 人 DD (= 1,2) 
坪 为 不 变 集 ,而 二 
PRAY= Pillwb tw) € Hi 对 Yn 0}) 
= Pio EI = Yn A 1.2). 


JE 有 





于 是 
0 PANDA PO) < |， 
可 多 这 时 六 对 8 旦 不 遍历 的 . 从 而 可 见 有 限 状 态 平 稳 马 开 链 遍历 
当 仅 当 它 的 初 分 布 只 集中 在 -- 个 常 返 类 上 . 
3. Birkhoff 遍历 定理 的 应 用 


通常 许多 随机 系统 如 果 它 的 运转 宙 制 是 时 间 不 室 的 ,那么 经 
过 充分 长 的 时 间 ,与 这 个 随机 体系 相关 的 -. 些 随机 过 程 就 可 过 侯 
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地 认为 是 平 稳 这 程 , 这 -一点 可 以 从 有 限 状 态 马 开 链 的 特例 米 理 解 ， 
当 运 转 时 间 充 分 长 后 ( 即 1 宇 TT 六 0, 可 认为 frtw) 遵 从 于 稳 分 布 
(不 变 概 未 分 布 ), {trtw):t 宇 0} 可 近似 地 当 作 平稳 过 程 . 对 于 - 
个 遍历 的 平稳 序列 = 和 作 ,(o)} 及 g (6) 一 (0) ,5 (w)) ,由 
于 概 深 为 1 地 和 右 

kg (wm) = lin 二 see (7. 20) 


.1 
一 lin a 2 lb da be Co) ). 
的 一些 重 旨 的 统计 参数 ,如 均值 ,方差 ,相关 函数 , 协 方差 函数 都 
可 由 台 的 一 个 现实 (条 轨道 ) 在 足 驶 长 的 时 间 中 的 取 值 来 估计 . 
例如 其 均 俩 
HA Eble) = Eelw) 一 和 二 5 


1 
全 页 之 全 (w) (n 充分 大 )， 


禄 关 函 数 
RO Est) = EL) lim TE) de) 


1 = 
s 2 Ceo)é rtm) Cn > 1), 


对 连续 时 间 参 数 的 平稳 过 程 ,由 Birkhoff 遍历 定理 也 可 得 到 相应 
的 注 历 定理 . 由 于 严格 地 叙述 -一 般 定 理 杰 用 到 许多 测度 论 的 上 具 ， 
这 电 我 们 给 出 -人 大 大 加 强 条 件 的 定理 ,并 直观 地 说 明 怎 样 由 
Birkhoif 定理 去 推导 这 个 定理 . 

定理 7.4 设 Y- 和 (wy :f 关 0} 是 一 个 平稳 过 程 ,tCw) 对 4, 概 
率 六 1 地 连续 , 又 没 Fr》 是 - -个 有 界 分 段 连续 函数 , 则 


’ - 
fim 二 | fb Yd = gp (Cw) 


概率 为 1 地 存在 ,而 有 下 (oO 一 玉生 (四 ,同时 ge 一 gm) 
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楼 这 为 上 的 拨 交 YY 4)， 
推导 说 明 “今世 (二 AGto) 册 ,于 是 术 Go 十 科 覆 
序列 ,而 氏 天 1 骂人 而 由 irkholf 记 刘 定理 可 以 得 到 


! AD 人 
1 


lim a| ft, te ddr 一 lim 一 : 
概 次 为 1 地 存在 .并 用 
下 一 Fy) 一 E| fC ds = EE Cw)). 
得 注 汪 到 170r 1 下 二 十 (在 办 ?就 可 以 得 到 : 硅 NN 
ovw 十 1 让 
1 ,1 到 。 _ 
[二 Ace alt > 坟 [、 [EC ) | di s Ny 0 CN -> om}, 
于 是 概率 为 1 地 和 有 
4 
lim | AE Cwm)d = g tw). 

例 7.1 后 而 在 第 九 章 中 定义 39.3 将 给 出 的 平稳 OU 计 程 

一 4 ;ft 之 人 就 满 吓 本 定理 条 件 , 放 刀 以 概率 为 1 地 成 立 


im FoVd = Eto) = A 
事实 上 ,定理 7.4 中 关于 了 的 有 办 连续 慎 茶 件 肥 总 (对 /的 
连续 性 条 件 沟 可 大 大 减弱 ,而 只 杰 (7.21) 天 端的 积分 有 定义 ,而 月 
下 1 二 到 可 . 王 是 对 OU 过 程 ,由 于 它 昨 廊 历 的 ,我 们 还 有 


lim | 5&0)de = 0， 
.if 
Lm 志 | bd = EC) = RT) 
一 人 Ye 


-FF 省 
2n7 2mxzf] - 





yds 
e my 











#7.3 遍历 论 中 的 一 些 基 本 概念 


本 节 介 绍 遍 历 论 中 的 : - 些 基 本 概念 ,它们 不 仅 在 遍历 论 中 很 
重要 ,而 基 对 数理 统计 ,随机 过 程 论 都 有 重要 意义 , 对 统计 物理 与 
非 线性 科学 , 它 也 都 是 重要 的 基本 概念 . 

1. 混合 与 遍历 

前 面 ,我 们 给 出 了 遍历 的 定义 . 但 是 这 个 定义 中 的 条 件 . 即 不 
存在 概率 非 0 或 1 的 不 变 集 ,其 十 分 难于 检查 的 .下 面 的 命题 在 某 
些 时 候 较 为 易于 检查 . 


命题 7.5 6 是 (0,. 殊 ,PP) 的 保 测 映射 , 则 5 这 历 当 有 是 尽 当 对 
YA,BE.F ,使 


lim 二 SP 4 门 B) = Pod)P(0B)， (7. 23) 
了 = | 


证 明 1) 当 (7.23) 成 立 . 设 和 是- -个 8 的 不 变 集 , 取 A=B8 
三 4: 于 是 有 


lim 2 YPCAN G+4) = PA), 
TT E=1 





即 PeA)==P(A)*=>PCA) 一 0 或 1. 可见 86 对 PP 记 历 . 
2) 当 9 对 由 历 ， 于 是 有 


lim 二 » DCG) = = Elatw) ot) = Talw) P(A) 
‘概率 为 1 a 由 此 可 以 得 到 (这 一 步 不 严格 }: 
lim 一 二 ECO)) 一 = Ela(w) Els(w), 





、 
即 lim 过 2Ptee NB =PCDNPBY. 
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另 一 个 示 历 论 的 重要 概念 征 混 合 , 尼 的 定义 如 下 : 

定义 7.5( 混 合 ) 设 0 蚌 (,. 玉 ,PP) 上 的 保 测 映射 , 设 P 对 8 
(或 日 天 二 天 ?是 混合 的 ,如 果 对 Y 有 ,BE. 字 ,可 有 

POANMN BY > POAYPEBY (n+ 0.). (7. 24) 

混合 的 直观 意义 越 :反复 用 8 对 如 映射 是 通天 次 , 它 就 应 在 六 
的 意 交 于 充分 均 人 ;因为 肌 4 一 1w: 信 ww 表 江 经 过 5 深 六 据 
射 进 入 4 的 点 集 ; 吉 一 开始 在 主 中 放 入 标 纪 物 ( 如 早 术 }), 则 从 B 
中 出 发 , 绕 # 次 8 映射 进入 4 的 点 集 就 着 8“A 门 BB,《7. 24) 告 诉 
我 们 当 ， 充分 大 ,不 管 4 在 邦 儿 ,这 个 集 台 的 大 小 P(O “4 门 B) 近 
让 和 有 4 与 的 大 小 PC4).PCB) 部 成 比例 . 这 不 是 意味 戎 标记 物 
到 处 近 了 均匀 了 吗 ? 

(7. 23) 也 道明 子 遍 历 的 直观 合 义 :注意 到 














s | 7 Cao7ato) 1 
六 TO 40 5 一 一 一 - [=— Eante)). 


?1 








其 中 (的 = Nase /a Tmh Na (oAH {RHE AwE Bl. 
7.23) 团 Evatt) 才 PCAIPCB), Ng(w) 是 所 晴 出 发 在 前 mn 次 0 
的 鼎 射 下 ,由 请 出 党 访问 4 的 次 数 ,vis(w) 就 是 访问 4 的 舌头 . 
《7 24) 屋 涪 这 个 烙 率 的 期 望 ( 概 素平 均值 ) 是 与 4,8 的 大 小 成 比 
例 的 . 也 就 是 说 ,时 间 充 分 长 后 ,按时 间 焉 均 不 管 从 那儿 出 发 
(YB) 它 将 在 按 忆 下 均 的 意义 下 均匀 地 访问 呈 的 各 部 分 . 下面 的 
命题 告 拆 我 们 : 混 合 是 比 遍 所 更 绰 的 性 质 . 

命题 7.6 芳 9 对 已 混合 刚 和 对 严明 万 . 

证 明 由 于 极限 存在 能 推出 平均 极限 存在 而 有 与 之 相同 ,由 
(7, 23) 与 (7. 24) ,命题 7, 6 显然 成 立 . 

例 7.2 (平稳 马 氏 链 的 遍历 性 与 混合 性 ) 

设 上 是 有 限 状态 平稳 马 氏 链 , 命题 7.5 告诉 我 们 二 明 历 的 充 
要 杀 件 是 它 的 平稳 初 分 布 俗 在 - -个 常 返 类 上 有 负荷 . 而 再 用 命题 
人 6, 这 果 得 至 温 合 当 且 仅 当 它 是 非 周 期 而 日 记 历 的 .我们 略 去 
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它 的 证 项， 

说 明 : 命题 7. 和 告诉 我 们 , 老 守 混合 , 则 它 必 须 吉 内 . 它 只 有 

-个 常 返 类 概率 负荷 不 为 0. 又 由 33.3 中 4 段 就 知道 这 时 上 非 周 

期 是 lim pln) 一 t， 的 充 要 荣 件 , 然而 

rp Pet 一 0》 = 1) 

— PAN BB) = PCAIP(B)}. C7. 25) 

其 中 一) 三 让 ww)=-i). 二 是 若 了 有 周期 时 ， 

0 没有 要 限 ,那么 显然 2 不 泥人 台 , 反 之 ,如 马 氏 链 常 返 互 通 非 周 

期 ,网 四 (7. 23? 可 以 得 到 对 - 般 的 A,B8E.x ,部 有 (7 24) 成 立 ( 这 
里 的 证 明 旧 用 色 更 多 分 析 工 具 , 这 皇 我 们 上 略 支 它 )， 


2. 糖 与 相对 炳 


以 的 概 食 最 后 由 C. Shannon 在 信息 论 中 提出 ,用 以 刻画 -… 个 
离散 值 随机 变 巩 或 - -个 离散 分 布 的 不 确定 性 的 大 小 ,或 考 说 刻画 
知道 此 随机 变量 的 取 值 所 获得 的 信息 量 的 大 小 . 先 让 我 们 从 最 简 
单 的 随机 灾 量 ,- -个 随机 家 件 4 的 示 和 性 求 数 Ttw)( 它 只 有 0 与 1 
两 个 取信 } 出 发 来 分 析 . 知道 Ttw) 二 1( 即 4 发生 ) 所 攻取 的 信息 
应 该 是 4 发 生 的 概率 PCA) 的 详 数 .将 丝 信 息 记 为 玉 (4) ,好 有 

{AD = oPCAY). {7, 26) 
如 果 有 上 大 告诉 你 ;“ 美 国 梦 幻 队 在 奥运 会 胜 了 日 本 队 ”， 你 会 觉得 他 
没有 给 你 多少 信息 ,甚至 认为 他 说 了 一 名 废话 . 扩 之 ,如 困 有 和 不 洛 
诉 你 - -个 从 未 输 过 的 名 将 在 一 次 比赛 中 名 落 孙 出 ,这 就 使 你 觉得 
区 一 消息 的 信息 最 很 大 了 ， 原因 是 前 -- 于 件 几乎 概率 为 1 地 发 后 ， 
而 后 一 中 件 发 生 的 琶 率 极 小 . 由 此 , 读 考 可 以 体会 到: 前 面 认为 
2f(4) 是 (1) 的 沼 数 是 十 分 合理 的 , Shannon 还 对 信息 景 作 如 
下 规定 : 

1 HCOAYD0, HU =0; 

2) 当 4A 与 妃 独 立 , 互 (4 门 有 一 娓 (4 十 五 (及 )， 《7.27) 

3) POAY FPOBY, [HAY 2A. 
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这 :天 规 定 帮 与 表册 很 -- 敏 ,知道 -个 必然 发 二 的 书 龙 生 了 了 . 妆 然 
没有 获得 信息 ;加 时 知道 两 件 不 相干 的 再 发 生 了 .所 获得 的 停 且 点 
是 分 别 芍 得 的 信息 之 和 ;第 一 项 息 定 有 - :点 人 为 的 技术 办 率 ,位 也 
还 是 很 白 然 的 . 用 07. 20) 中 的 ¥ 米 改写 (7.2 站 的 17 一 3) 妈 有: 

1 区 让-D, | 区 间 ( 概 闪 D 和 PGD 和 所] 上 的 一 个 连续 也 数 ， 
PI) 0. 

2 Fp Fp pq). 

3 此 爱 续 ， 


四 毕 pp p= :1 Ftp"), 于 昆 gp — 

















4p), 用 的 连 线性 就 得 到 对 于 0<ass1.8(p0 一 ag(p). 令 
Fe 1 一 c, 找 必 
EP) — te wp) 一 log Ea ya -clogp. 


此 中 显然 未 可 能 尽 0， 否则 Cp) 0 就 大意 交 了 i 这 里 的 < 可 香 
成 是 选取 的 单位 常数 . 

综 上 所 述 ,已 知 随机 变革 sto 一 7ito) 的 结 昌 所 获得 的 信息 
重 尾 有 4 一 dog1t4) low:Pt4)| 皮 “使 一 二 FF 面 
我 们 再 从 随机 小 数 :é(w) (ETo,11, 本 1 上 的 均 与 分 布 ) 
来 认识 Shannon 信息 量 的 定义 ,将 (Cw) 写成 -一 进 制 小 数 形 式 ， 











Etw) = Maw alw) = 0,1). 
是 {ustw)) 是 相互 A Plsa, tw) =0) 
| 因此 ,知道 了 一 位 二 进 制 小 数 的 取 值 所 著 
得 的 信息 卉 是 --log| 六] = log.2. 若 取 a= 2. 基 cj 二 必 ' 也 就 有 
Jog.2 一 1 ,也 就 是 以 由 -位 一 进 制 小 数 取 午 所 共 得 的 人 各 到 和 1 
《个 单位 ), 那么 知 道 两 位 : : 涝 制 小 数 所 获 信 息 量 是 “logs 12， 








lh 
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因为 
Plwsartwy) = Oacitw) = 1) = Plow:a tlw) = lani(w) = 1) 


一 Plaa,tw) 一 yn F1 Cor) 一 0) 
1 


二 Plew,as lc) 于 ] euratoD) 一 0) 一 中， 
进而 可 得 知 mr 位 二 进 制 小 数 所 获 信息 量 应 为 :一 loge| 六 | 一 内 . 当 
然 我 们 不 能 只 显 及 随机 小 数 ,所 以 存 - . 般 情形 为 了 省 写 常 数 ,我 们 


1 
取 2=e,e 一 ge 1. 
设 一 个 随机 试验 过 可 有 邮 个 下 同 的 结果 :4 do 它们 发 
生 的 概率 分 别 为 ; 

PA Tp SP lh>0 (m1,M). 
于 是 知道 试验 结果 是 4, 所 获 的 信息 量 是 一 logp. 知道 不 同 的 试 
验 结 果 所 获 信 息 量 是 不 同 的 . 总 的 描述 这 一 试验 结果 所 获 信 息 量 
五 (人 是 知道 不 疝 试验 结果 所 获 信 息 量 按 概 罕 的 平均 值 ( 数 学 期 
望 }; 

已 (6 = Dp logp') = 一 Dogp, 
shannon 把 及 (6) 定 义 为 此 随 视 试验 的 坑 , 这 个 随机 试验 也 
可 理解 为 如 的 -个 分 割 ， 
2- DAAN A =$ G7 
定 父 7.6( 分 割 的 炳 ,随机 变量 ( 取 可 数 个 值 ) 之 雯 ) 设 介 有 
一 个 可 数 分 割 Ai Aw! ,了 P(A) 二 p=1,… , 则 此 分 乔 
< 的 炳 定义 为 
HE) A— Splogp, (CM 过 十 co) (7. 27》 


CH} 可 以 下 十 x). 具有 可 数 个 取 值 的 随机 变量 So 各 Co 
ai 的 炳 定 六 为 分 割 14 “4 之 粒 ， 其 中 
28 生 








A att) a 2 


定 久 了. 7 相对 炳 ) 没有 分 布 P 一 ip.:i 王 1,2 与 QQ-19 
i 一 12 下); 网 分 布 户 相 对 于 @ 的 相对 炳 定 交 为 


| Splog 人 g. 一 0 时 必 有 记 一 00(Y 让 1 


十 5， 共 他 情形 . 


bP A 


(7, 28) 

命题 7.7 DP, 外 ) 宇 山 而 及 CP,Q}=0 当 且 仪 当 疡 sd 

一 上) 
证 明 和 不妨 讼 站 COP :和 二 十 2 出 于 

EU A 1 logt>0 0 天 1 

















四 为 
1] 、 WL 
-> 0 1; 
g' Cr) 
EE 1 
i 
gC1) = 0. 
叮 见 gg 一 0 4 夫 ]) 取 (人 ,于 是 log pe (而 


日 等 号 仅 当 一 g 时 成 立 }, 从 而 


> plog > Spl 


和 而 及 上 式 中 等 号 仅 当 疡 一 9G 王 1 2 成 立 . 
命题 7.8. 1 设 &Cw) 是 具有 iM 个 不 同 取 值 的 随机 变量 ,$ 取 
宇和 的 入 康 分 剖 为 pepu . 则 





02) = 一 Nologp, < = logM| 一 -> -一 荆 南 |- 
即 当 & 以 相同 概率 | 二 | 取 不 同 的 对 个 值 时 洁 的 炳 最 大. 
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i 
证 明 - 2 Plogp. — logi = -— | 之 好 (logp, — log 部 ) 


| 
] 
Tv 
站 
Sr 
的 


Na 


| 

1 
和 
3 
Eb 


< 站 由 命题 7.77?- 


命题 7. 7 还 有 - ' 个 重要 意义 ,就 是 亡 觉 明 帆 对 坑 - 表 述 出 忆 与 
妥 的 差别 :; 当 卫 一 扫 时 ,上 (PQ) 一 0. 而 记 与 y, 均 十 分 接近 时 ， 
EP, 昌 ) 就 很 小 ,从 而 PP, 有 @) 可 以 看 成 了 与 蛋 之 间 的 准 距离 .我 
们 之 所 以 说 是 准 距 离 , 是 因为 它 丰 对称, 也 不 满足 二 角形 不 等 式 . 
所 以 不 能 满足 距 窗 公理 ， 

对 于 有 概率 分 布 密度 的 随机 变量 s(w), 它 取 某 - :个 定 值 的 裕 
雍 总 是 霍 , 所 以 直接 按 (7. 28) 冠 义 就 无 意 立 . 但 是 ,我 们 可 以 按 
(7. 28) 的 思想 做 -点 变化 ,定义 ， 

定义 7.8 设 具 xz) 是 以 产 z) 为 概率 分 布 密度 的 随机 变量 ， 
其 箭 定 义 为 (或 称 分 布 密度 p(xr) 的 炉 }， 

H(t) 全 一 |ecoplogpcrodx 《7. 27Y" 


分 布 密度 p(x) 对 gkx) 的 相对 炉 定 义 为 pCa)log 名 2 dr ， 


命题 7 8 1 告诉 我 们 有 限 的 高 散 分 布 中 以 培 生 全 形 的 习 景 
大 , 那么 有 限 区 间 . 上 具 尖 密度 的 分 布 何者 糖 最 大 呢 ? 非 有 限 区 间 的 
情况 如 何 呢 ? Boltzmann 多 年 前 兽 给 出 解决 这 个 问题 的 思想 . 

命题 7. 8.2 在 具有 有 限 的 数学 期 望 Et 二 的 条 件 下 取信 
于 {zz ere" } 的 各 种 离散 分 布 中 ,以 分 布 汶 


PT Ce Ce 
; z 


的 粹 最 大 (4 依赖 于 /0 ;其 炳 为 全 -logC. 
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ry 


证 明 H(t) 一 -一 > Ce | 1ogt 一 你 | 一 和 一 logC， 而 甩 . 
村 任 一 分 布 ipa? 有 





-4 | 3 | 
站 >， Pal og mm ~ leg 和 人 人 Ps logt 
7 5 四 


Ce 


一 人 - logt ”1 Sploge. " 


周南 


1 — Sologp. 全 1og( 


命题 7 8 3 在册 值 为 如 方 宕 为 0: 的 取 俏 于 1:4 一 1 
的 企 部 离散 分 布 中 以 分 布 


ar 
a Ce EE x | Ye ， | | 


的 糠 上 避 太 (a EE }) 依 更 二 (Cp 3 。 起 们 为 开 - 全 


证 明 ”作为 避 题 , 读 省 自 证 . 

命题 7.8.4 ”指数 分 布 是 充 L9. 二) 上 共有 了 辐 均 位 的 有 和 密度 
条 分 布 中 杭 最 大 的 ;NCaso ) 基 在 RR' .1 人 均 慎 4 与 闻 藉 5 的 民 
在 帘 座 的 分 布 di 烽 三 大 的 ;而 均 人 对 分 布 是 让 估 于 有 限 区 何 iorp 1 上 
的 有 密度 中 . 粹 达能 大 的 . 其 服 大 恼 分别 为 


-人 








- logA, 3 {1 二 log?rn}) -t+ logo. log{th — wa). 


证 明 这 里 关键 的 问好 是 完 键 志 不 中 


jec Yng ee > 让 


吧 利 用 pCryd = 上 epae = .其 他 证 明 燃 似 于 命题 7.8. 1 一 
7. 8. 3. 
F 面 我 们 轩 精 的 概念 来 解决 :个 黄 名 的 游艺 难题 , 陈 珠 问题 . 
例 7.3 用 13 颗 . 外 形 守 全 相同. 关中 -里 是 假 环 , 比 世 
287 





他 珠 轻 , 现 有 天 平一 架 , 但 无 法 码 , 试 问 至 少 要 用 多 少 次 才能 找 出 
候 珠 ,应 怎样 去 称 ? 

分 析 由 十 天 平 无 法 码 ; 所 以 所 谓 称 , 无 非 是 将 要 称 的 珠 分 为 
二 组 ,其 中 两 组 有 相同 个 数 { 设 为 上 个}) ,分别 放 上 太平 黄 端 ,看 赴 
伯 玉 平 是 平 的 , 荷 是 平 的 ,说 明 假 珠 在 剩 目 的 寺 组 中 ,否则 假 珠 在 
大 平 上. 称 一 次 就 对 应 - :个 随机 试验 ,这 个 试验 就 是 如 下 的 一 个 分 
割 : 总 的 个 数 为 呈 个 珠 : 分 为 一 组 法 个 汰 个 :站 一 忠 个 ,由 于 柬 个 
中 任意 ~- 个 号 假 珠 的 概率 部 是 ,于 是 称 一 次 这 个 随机 试验 共有 
二 个 结果 :假球 在 天 平 堪 边 , 右 边 和 短 下 那 组 中 , 我 们 把 这 三 种 情 
形 分 别 记 成 4 nd ,4 这 时 
HA CplA ogp lA) + plA)ogp tAs) + pA Nogp (tA)) 

















< |og3， 
如 果 总 共 称 六 次 , 记 第 ?次 称 所 有 可 得 结果 为 本 ,4 届 , 于 是 总 
的 结果 共有 3* 个 . 我 们 重新 把 次 称 珠 作为 一 个 新 的 随机 试验 ， 
将 这 一 随 山 试验 的 精 记 为 召 w ,那么 它 等 于 

H», =— Splogp, log3” = Nilog3, 

其 中 p, 是 第 i 种 可 能 的 结果 出 现 的 概率 . 所 以 称 六 次 所 能 获得 的 
信息 不 能 超过 Nlog3, 然而 要 从 13 个 球 中 辨 出 某 一 个 轻 珠 所 获 信 
乱 应 为 一 log 3 一 og13| 因为 某 个 特定 珠 是 假 的 概率 是 点] .由 
此 可 多 要 在 和 N 次 称 珠 中 找 出 假 珠 , 所 获 信息 量 ( 灶 ) 应 大 于 或 等 于 
log13. 即 要 求 ,Nlog3 污 Hw 之 log13. 即 N> 人 Elogs13>logsy 
三 2 这 就 给 出 了 应 称 次 数 的 一 个 下 界 , 即 至 少 要 称 3 次 . 

下 面 我 们 来 设计 称 珠 方案 . 设 第 / 次 称 时 是 从 mz 个 珠 中 , 选 


出 两 组 i 个 珠 放 省 天 平 左边 与 右边 , 剩 下 2 2 个 珠 . 显然 "21 
2886 











一 13 ,而 ms,ms 可 根据 第 一 次 称 的 结果 而 定 . 第 - -次 称 的 最 好 方 
案 是 获 皮 最 大 信息 的 方案 ,即使 


， 2] 


2 11 | 
1 | 


志 i 加 ] 1 
log 得 证 11 一 1iogl1 T1311i 





尽 基 楼 过 log3 的 方案 , 即 要 着 尽 莽 搂 近 去 (参见 合同 7.7 的 还 
明 ). 所 以 各 许 取 为 4. 这样 ,第 -- 次 称 庶 为 取出 两 组 ,每 组 各 4 个 
珠 上 天 平 去 称 . 可 能 得 到 的 结果 是 ， 

1) 天 半 两 奖 平 ,假球 在 剩 下 5 个 中 . 了 于 是 这 时 第 二 次 只 要 对 
xm 一 5 去 重复 上 而 的 分 析 . 

2) 天 平 号 端 不 平 , 则 假 珠 庶 在 天 平 上 的 轻 端的 4 个 珠 中 . 这 
日 #1 一 

对 1) 的 情形 第 二 次 称 是 将 5 个 珠 分 为 二 组 ,上 太平 的 个 数 友 
2( 因 为 要 使 24: 近 5). 于 是 此 试验 的 炉 基 


下。 mm 一 28。 
.<2 |] 一 
mts 十 ns | og| 1 





24:| 
入 | 





| log 


好 的 称 法 是 使 它 楼 近 于 log3, 邵 芭 一 笃 一 十. 考 是 应 取 瑟 一 2, 邵 
将 第 一 次 称 利 下 的 5 个 珠 中 选 两 组 各 2 个 放 上 大 平 , 如 果 这 时 天 
平 两 端 六, 则 假 珠 是 镜 下 的 那个 ;如 果 天 平 两 端 不 平 , 则 假球 是 轻 
端的 两 个 之 -, 而 其 他 三 个 均 为 好 珠 . 只 要 将 轻 端 的 两 个 珠 任 选 - 
个 与 好 珠 上 天平 去 比 ,如 得 到 天 平 两 端正 , 则 轻 端 两 个 珠 中 没有 被 
选 上 天 平 的 那个 就 是 假 珠 ,否则 在 天 平 上 的 那个 是 假 的. 

如 果 第 一 次 称 天 平 两 端 不 平 , 则 经 端 那 4 个 珠 中 之 一 是 假 的 ， 
它 比 从 5 个 珠 中 找 出 假 的 更 容易 . 可 如 前 面 的 方法 称 得 假球. 综 上 
分 析 可 知 称 三 次 就 足够 了 

对 于 米 知 假 伯 的 轻重 要 在 13 个 珠 中 称 出 1 个 假 原来, 按 寺 而 
类 做 弛 估计 的 所 称 次 数 有 下 限 =3( 即 人 log3>>log26, 因 为 未 知 候 
珠 轻 各 时 我 们 基 要 只 26 种 不 同 结果 :第 了 个 陈 轻 于 正常 .第 7 个 
环 重 玫 正 常 (一 1,2,… 13) 中 找 出 所 发 生 的 答案 ). 但 是 这 只 是 必 
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室 菜 件 . 实际 上 一 3 是 不 够 的 ,我 们 再 仔细 分 析 - -下 ,由 实 上 第 - 
歼 称 完 生 利和 下 需 莫 信息 是 : 当 如 4 一 1 2 发生， Wi 确定 13- 
| 个 珠 ! ph 的 那个 假球 .了 星 ( 一 log3 守 log2013 -2 站 
恬 生 ,并 还 希 双 妈 定 24, 个 珠 中 所 瀑 的 那个 假球 , 国 而 tk- lo 
计 ]Jog2 小国 为 这 如 未 上 上 天平 有 的 珠 -- 定 金 基 真 康 ,我 们 已 有 真珠 
样 帆 7. 
综合 此 种 笠 形 的 分 析 可 以 得 色 
{Eo Dlog3 (og2(]3 — 25)) V (log2k,). 
四 于 当 .B25 时 .og2& 守 logl0;:& A 时 .log2(13.-2k1 2log10、 
其 币 必 必须 有 1+ logn10( 寻 六 汪 4) 放 择 洗 要 称 生 次 机 行 . 事实 上 
称 4 次 就 能 了 ,但 我 们 略 去 具体 的 称 法 . 
例 7.4 神经 阅 络 的 学 习 律 的 功能 分 析 . 
设 有 个 闪 个 神经 区 ,每 个 可 取 二 和 值 :- 1 或 1. 神经 元 之 间 
可 以 有 对 相近 作用 (了 全 4.4.1 段 ). 要 使 这 神经 网 络 学 会 信息 * 一 
(vv) 也 就 是 要 使 ? 变 成 此 网 络 的 -个 吸引 子 , 党 多 的 学 习 
方法 是 多 次 逐步 改变 代表 相 百 作用 的 联结 系数 {W,,) ,使 得 最 终 ， 
能 变 成 -个 吸引 子 , 在 每 一 次 改变 中 有 上 几 个 最 有 和 名 的 学 习 律 , 即 选 
取 W, 的 改变 二 AW,, 的 方式 如 下 : 
Hebb 律 AP 一 Wy, ys 
Hopfield 学 习 律 AW,, 二 7(2y, 一 1(27 — 1), 
从 相对 烦 的 观点 .可 以 分 析出 这 两 个 著名 学 习 律 的 优点 . 其 实 ,学 
记 人 联结 杀 数 WW 二 Wi 十 AW, (把 原来 的 
结 条 数 WW,, 改 为 新 的 怒 ,) ,能 使 从 y 出 发 的 神经 网 络 所 得 到 的 输 
i 尽量 与 * 楼 近 ( 这 就 最 接近 于 使 > 是 吸引 子 ). 然而 从 sy 出 发 的 实 
际 输 出 按 (4.23) 应 是 以 玉 , 为 分 布 的 随机 变量 &Cw) ,其 中 
Px) PE(wY = zy 一 DP,, 
一 {I [itexpl- BDIWSy, oil 
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(是 介 23 二 太 要 使 <o 与 y 近 -就 旺 要 六 ,与 集中 在 * 的 商人 邹 市 
5 .接近 ,也 就 丰 相 对 炳 
他 六 人 
hEB, 1. ) -- ~ 在 (ziLog - 


~ 


~ ogil 二 exp! | ~ CH 一 | 
《7. 31) 
尽 莽 接近 生 站 十 由 有 一 1 Cs: 面 


|， Vo 
,te) = 
|，， 和 兴工. 
也 王 57. 30) 中 和 哇 务 项 丝 为 下 网 ,我 们 就 知道 和 号 下 各 项 骨 达 其 
最 大 必然 使 57. 34} 达 到 最 小 . 
在 御 种 学 局 律 中 对 修改 艇 总 有 - - 定 的 界限 .不 可 以 取 力 
-oo 二 7 汕 实 上 (假定 站 二 0)， 
1 当 限 制 0AW 7 时 ,AW 二 yiv + 
2) 当 限 制 1aAW | 所 7 时 AW 一 #7(2% 一 17(2v, 一 1) 
均 为 使 46..,) 达 到 最 小 的 修改 是 12W,,}. 
出 此 可 见 ,Hebpb 律 这 -在 牛 物 学 中 毕 就 发 现 的 自然 界 常 在 
的 学 习 律 原来 是 经 过 长 期 自然 选择 而 在 条 件 0 过 ap 二? 下 达到 
最 优 的 学 习 律 . 而 Hopficld 的 学 习 律 则 是 在 对 称 的 又 求 14W7, | 
7 下 ,达到 最 优 的 学 习 律 . 在 习题 中 我 们 还 可 以 看 旬 其 他 记 种 常见 
的 党 习 律 也 是 在 茶 种 意义 下 最 优 的 学 习 律 . 
在 实际 的 "学习 ?操作 中 ,首先 要 人选 一 个 初始 联 结语 六) 然 
后 按 我 们 事先 要 求 的 学 习 律 (例如 Hebb 律 或 Hopfeld 律 ) 肥 复 进 
行 递 推 ; 








WT 1 本 -十 全 到 , 
到 旦 够 长 的 放 为 此 1 本 的 选取 可 以 有 -- 定 的 自由 嵌 )， 





3. 奈 件 坑 与 保 测 映射 的 炉 
背 对 概率 空间 有 哟 个 有 限 分 宕 如 与 zs， 


TA Lv， 品 一 Uhh 一 他 (Rs 


mr ,Bn Bu); = LU) Bi BiB, 一 贡 使 尖 力 ， 
-1 
定义 7.8( 秦 件 彤 ) 分 割 天 对 x: 的 条 件 箭 定义 为 
Ln) 一 百人 TV nx) — Hilns), 
其 中 开 | W Ts 是 分 割 {A1B,:& 二 1 rN lM}. 
事实 上 
再 (rr VY mn) 一 一 》 PA BogP CAB) 
ht 


一 一 NPAB) NogPCBIP A | BD)), 


于 是 
Hin /rs) 
= SO POCBYPOL |B ) (dogP( BPC |B)) 
十 PPB NIogP EBD). 
=— DPPCBIPCA, | BlogP (A 1B) 
= SPB — PPO NB OlogP ANB)) 0. (7.31) 
NL A 的 含义 是 先 做 zi!: 上 肖 按 Xo 将 "1 的 每 个 子 集 再 细 分 为 : 
(BY 我 们 将 此 简称 为 连 短 TI sR? 分 割 . Ta 对 区 1 的 
条 件 粮 是 先 做 分 割 x ,再 接 x 细 分 所 能 增加 的 平均 信息 量 . 它 也 
恰 是 在 zw 的 每 个 事件 4; 的 条 件 下 ,对 更 细 的 划分 ; 4 二 【入 5 
的 分 割 的 条 件 概率 的 箭 ,再 按 PCA,) 作 为 入 值 的 (概率 ) 平 均值 . 
定 光 7. (随机 序列 的 炉 ) 设 E&C)ES= {gy ,sn) ,Cn 二 1， 
2 网 合 ,C0) 的 炉 定 多 为 
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7 lim : I (Es 


其 中 CS) 是 对 分 基于 :条 5 一 5 于 厨 (一 5 7 的 粮 . 
设 记 尼 以 卫 ,、w 为 转 格 概率 吞 阵 并 以 纪 为 初 分 布 的 切 氏 链 ， 
则 


11(éy lim 于 和 (由 条 件 炉 定义 ) 
Jim 7,) THE IE) tT HCE EE N+ 


! 了 3 ) 
其 中 总 号 分 别 理解 为 匀 们 各 自 取 不 同 的 值 的 事件 组 
成 的 分 割 . 二 是 
了 
= PS sk) $s,) 


XX HS, |é, (0) mi 1 GC 一 i ] ， 


其 中 C8 各 (一 4 0) 二， 表示 所 对 于 事件 
oo 一 3 
的 条 件 概 这 分 布 的 精 . 又 由 于 二 是 马 氏 链 . 上 还 条 件 倒 率 即 总 对 
事件 ie: 名 (om 的 条 件 人 概率, 故而 
|) 一 和 一 So 一 5 1 
由 此 
Hi (Et 1)) 


一 \ Plwst (wy) — So 0 一) 
Ci 1 


1 

















一 


x EE ss) 
= H&G 1 = Ynplogp,. 
这 样 就 有 | 
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HY lim (HOE + HUE lS) 


二) 
， 
， 1 | 
lim ! log™ lm Xl - plogp) 
=- 一 > rm plogp,,. 


将 这 个 概念 推广 到 保 测 喘 射 ,我 们 定义 ， 
定义 7. 10( 保 测 映射 的 精 ) 设 (0,. ,P) 上 有 保 测 映射 中 又 








设 了 ;一 4 是 如 的 -个 分 制 .定义 9 对 的 炳 为 
H OH) A lim HUT VD Ye ¥ (0 01), 
其 中 8 一 和 41 2) 而 如 的 精 定 文 为 
五 () 一 supzz(2 1), 
上 式 右 端 上 确 界 的 范围 取 遍 一 切 有 限 分 割 . 


习 题 


1. 设 6 人 :一 0,1.2,} 是 平稳 序列 , 试 证 明 {} 仍 为 平稳 
序列 ,其 中 
四 = Go 二 Tat, | Cn = 2, ), 
2. 设 $Cw) 是 取 值 于 [0,2w] 上 的 均匀 分 布 随 机 变量 . 则 人 
{$Cw)} 是 平稳 过 得 ,其 中 
和 Co] = sin(é(w) + HR) (C0), 
3， 试 证 骨 : 
1) 若 4 是 -个 不 变 集 , 则 其 余 集 4 亦 然 
提示 :语意 (2 13) 一 本， 
2) 若 44,8 皆 为 不 变 集 , 则 A 站 B,AUB 皆 为 不 变 集 , 
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4 在 CQO. 上 的 保 测 晓 射 六 的 全 体 不 尝 集 组 成 一 个 事件 


休 o 代 ， py 上 下: av 
| #9 下 一 个 遵从 Posson 分 布 桨 随机 变 谍 .此 按 它 全 部 


叮 能 的 不 问 培 簿 对 如 作 分 唱 : 
| | -有 

so 鸭 灯 ( 岂 基于 述 分 制 的 情 和 

.1 本 2 到 新 在 柯 下 有 全 机 净 二 we 的 随 栅 室 
漳 ,2 全 有 用 分 各 

和 
信人 的 2 
咎 一 个 全 的 分 乔 芭 下 求 宙 Ga 并 玉 出 一个 尺度 空 换 办 对 局， 
俯 闪 max 1 -时 
遇 1 


] 


A 


,Hr) = | eat rologet edr. 


6， 试 4 让 吊 兴 ， 出 个 可 数 联 村 与 连续 塘 但 的 随机 室 鞭 洗 生 有 


坊 为 十 …. 
7， 谈 有 3 上 9) 罗 为 仪 六 有 有限 个 不 问 取 值 的 随机 变相 ， 
吕 进 有 与 丈 分 串 量 按 它 们 从 日 不 同 了 取信 所 入 的 如 的 分 砷 ( 丛 区 4 


是 )， F(x lA}, 

设 让 含有 点 个 红 球 与 2 个 得 球 的 一 个 党 中 连 综 油 深 抽取 
下 :入 扫 得 的 缚 果 摩 对 诺 一个 分 害 双 ,第 :次 栅 取 的 结 
果 对 应 分 皋 到: 试 针 在 就 包 的 抽取 与 碟 旗 嫩 的 抽取 贤 种 情形 分 中 
评 究 在 (arr 与 于 人) 之 朵 的 关系 

8 对 12 个 绿 . 若 其中 有 一 个 息 珠 , 末 知 二 经 于 还 是 恒生 真 
珠 , 现 几 匹 法则 大 呈 去 种 , 问 最 少 要 你 儿 次 十 能 找 出 般 球 来 ? 怎样 
倒流 ? 

10.， 试 将 征 珠 问题 的 倒 捧 广 到 里 次 一般 交 情况 ( 尽 万 挫 广 利 
扑 一 舱 的 情 池 ,而 得 天 整 齐 网 结 红 》 





11， 试 让 明 命 题 7. 8. 3 与 7. 8.4. 

12'. 今 上 2 一 [0;1) ,FF 是 的 -- 团 lebegue 可 测 集 , 令 8;0 一 7， 
err2mutmodl)f2o 的 小 数 部 分 ), 斌 征明 对 Lebegue 漠 诬 #8 是 一 个 
保 测 变换 ,而 有 昌 它 大 遍历 的 . 

13". 试 证 明 2 题 中 的 二 是 遍历 的 .并 求 出 





了 
lim 去 | sin(s(Cw) 十 Bsyds 


di 


lim 二 | sinceco) 4 Osin(Etw) + Os 4 DYds 
{在 概率 为 1 的 意义 下 的 极限 ). 








第 太 间 ”Gauss 过 程 生 一 阶 得 方法 


下 态 分 布 赴 概率 论 中 最 常见 的 分 布 1Gauss 过 程 也 是 一 种 常 
由 的 简单 随机 过 程 . 对 于 县 有 - 阶 矩 的 过 程 ( 它 的 任意 时 刻 的 随机 
襟 其 静 有 有 有限- 二 阶 条 ) ,如 灯 只 限于 期 里 , 方 基 与 协 方 莱 为 依据 的 
研究, 其 实 把 它们 当 作 Gauss 过 程 并 无 二 致 ， 








8S8.1 Gauss 系 


lL， Gauss 系 的 概念 

定义 8.1 设 I 赴 任意 一 个 有 限 或 无 限 ( 蔚 至 不 可 数 ) 的 指标 
集 . 随机 变量 族人 入 Qo):tET) 称 为 一 个 Gauss 系 ,如 果 对 了 中 任意 
有 限 个 :st yt, 都 使 和 Cw) Ce) 遵从 ， 维 正 态 分 布 或 
退化 示 态 分 布 ,用 特征 函数 的 语 襄 即 对 任 音 的 实数 入,… ,X， 


” 1 Ti ei 图 -Ly's a 
| 和 (9.1) 


其 中 po Ee ou ECE — ta) (pa). 
我 们 要 说明 的 是 :对 玫 正 态 分 布 , 算 阵 (ou) 是 可 着 的 ,oz 一 
He Am 的 联合 分 布 和 谷底 是 
1 [ ] [EE ] ] 
[nyvdettooy 本 下 F CX) (Con) |: | 
是 ,3 本 [| 
但 是 , 当 忆 sr 如 ,遵从 退化 正 态 分 布 时 , (on) 就 不 可 道 ,即行 列 
式 deilgw) 二 0. 当 了 一 (一 局 ,00) 或 [0,co0 ] 时 Gauss 系 称 为 
Gauss ?和 


(8. 2) 
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例 名 1 没 必 六 是 一 到 工 id, 的 自 态 分 布 入 tyero 的 序 
咱 . 那 么 旦 就 中 -个 Gauss 条 . 

例 8.2 今 友 一 Saby 其 中 必 ) 是 二 例 中 的 二 id, 正太 分 
后 庄 便 ,那么 人 os 就 是 :个 人 auss 对 (证 提 大 中 后 ). 
荐 的 联合 分 机 
就 是 进化 分 布 . 它 没 有 二 元 分 布 密度 . 灵 策 如 . 洁 a4=-0. a drs 
一 人 和 末 人 表 和 化 让 态 分 
布 - 六 由 于) 显然 不 再 有 概率 分 布 密 度 . 但 义 是 到 过 续 值 
的 随机 血 量 ,我 们 卉 (8. 1) 式 中 那样 ,; 洒 用 特征 函数 来 表达 它们 的 
联合 分 布 特 柱 就 较 方 便 , 而 且 可 以 使 表达 万 术 与 非 退 化 正 态 分 布 

狼 ， 





下面 的 定理 给 出 了 Gauss 系 的 定义 的 另 - -个 等 价 的 说 法 : 
定理 8. 1 1 EE 起 Gauss 系 的 兖 要 菜 件 旺 它 的 任意 有 
限 个 元 5 车 的 任意 线性 组 全 #7 静 是 个 一 维 正 态 随 机 变革 
证 明 必要 性 : 考 左 一 bi. 在 (8.1) 式 中 了 肥 加 二 ard 


= 1 a), 于 旦 


Nt 51 二 
PY “| i a 1 3 
Ete } - £! Ps | 一 et oh 四 ee 
法 中 
_ 1 . 了 
下 -- > ees OU = > Thy 
4=} Ee 


(由 于 协 方 郑 拭 阵 症 非 负 定 的 ,保证 oz0. 当 er 一 0 时 我 们 以 概率 
为 1 地 有 ?= Ap 
充分 性 ,从 表面 瑚 来 定理 的 条 件 很 弱 , 只 需 用 - 维 分 布 来 措 
位 寻 山 十 线 信 组 合 是 任 党 的 ,所 而 对 任意 实数 组 为,…, 丸 , 令 
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Dew) A 
二 


En VY da. 


4 


En Fn) ~ kl Nd | 


1 1 


DANECE TG, A 7 Odden 
1 2 


4 1 


荐 遵从 正 访 分 布 , 刚 Ee 一 可 to 了 4 一 上 即 有 有 
a a 
Ee 一 1 

由 定义 本 知 [1 0 是 Gauss 系 . 

定理 8.1 给 出 了 一 -个 在 说 法 上 比较 简单 的 等 价 定义 , 这 样 ,在 
验证 Gauss 条 时 只 涉及 1- 维 的 正 态 分 布 或 常数 . 特别 对 退化 的 情 
形 就 很 容易 说 清楚 了 . 从 定理 8.1 很 容易 得 到 . -个 重要 的 惟 论 : 

推论 1 Gauss 系 的 任意 个 由 其 元 素 的 乒 性 组 全 组 成 的 随机 
变 二 集 仍 为 Gauss 系 . 

证 明 市 二 线性 织 合 的 任意 线性 组 合 也 仍 是 -个 线性 组 合 . 
由 定理 8.1 可 知 惟 论 成 立 . 


2. Gauss 系 的 线性 组 合 的 分 布 


设 闻 一 a 
Gy 
即 
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{EY 2 
wl 
_ Ey, Er, | 
二 一 | ， [= . 一 AEE 
| : | : 
4 王 旋 1 (FEE, 





OAPI EC FI), — ED,)) 
ELC ED - EY, 
ElcAF— AE EL) (CAE — AEE)Y), 
EL[ACE — EOE — EC A’), 
[AECE- EFCE— EE YA 
(这 侍 [ ,表示 插 号 内 和 矩阵 的 第 i 行 ,第 j 列 的 那个 元 素 ) ,所 以 
DD A 0D) 一 4 人 4 = A DE AT (8.3) 
从 (8. 3 看 出 :当时 (9 必定 还 化 ;而 当 x 之 s 时 ,车 人 6)， 
6 ) 韭 退化 , 则 (9,… 3.) 非 退 徐 当 且 仅 当 4 的 获 是 5s; 当 一 s 
时 ,7 一: 加) 非 退 化 当 且 仅 当 (人 ,本 ) 非 退化 ,而 且 44 是 满 秩 
的 ， 


3， fauss 深 的 线性 闭 包 


车 5 二 位; 1E1 ) 是-- 个 Gauss 系 , 从 其 全 部 可 能 的 线性 组 合 
得 到 的 随机 变 央 族 仍 是 Gauss 系 . 此 外 ,下 面 的 定理 还 告诉 我 们 ， 
若 一 个 Gauss 系 的 元 素 列 在 概率 意义 下 有 做 限 , 则 此 极限 加 入 此 
Gauss 系 后 仍然 是 Causs 系 , 更 有 其 者 ,一 个 Gauss 系 的 全 部 可 能 
的 在 依 概率 意义 下 元 素 列 的 极限 仍 组 成 Gauss 系 . 由 于 Gauss 系 
的 一 个 元 素 妈 可 看 作 是 -- 个 线性 组 合 ,又 可 看 成 是 其 元 素 列 的 极 
扔 ,六 而 下 面 的 定理 说 明寺 的 元 素 的 全 部 线性 组 合 的 随机 变量 族 
是 一 个 包含 原 Gauss 系 的 扩大 的 Gauss 系 ' 记 成 工 (6) ;而 寺中 
肘 全 部 半 能 的 元 素 知 依 概率 收 敦 的 意义 下 的 极限 随机 变量 族 则 是 
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-个 出 大 的 Ganss 系 ; 记 成 LL), 称 之 为 8 的 线性 闭 包 . 它 有 的 每 个 
元 素 都 是 中 克 素 线性 组 合 的 极限 , 因 而 是 丰 成 5 的 匠 个 “ 汕 数 ” 
(更 确切 地 应 称 为 * 江 函 y(). 

定理 8.2 设 $5 二 61 1E11 是 Qauss 系 , 凡 从 人 Lb tb 
( 依 概 率 收 襄 站 刚玉， 0 Gr 而且 嫩 也 遵从 Gauss 
分 布 ( 止 态 或 退化 止 态 分 布 )， 


证 明寺 为 bk 所 LX YD. 


PS |) 0 G2), (8.4) 
PP Re 一 五 名 05 一 VarTtt -6 
中 (Cr 一- [ 一 ] ei dy. 
L227 
于 屋 (8. 4 变 成 当 吉 jy 一 » 时 的 下 述 极 限 式 : 
了 工 | exBp| 一 上- | | dr 
本 dl 2 ， 








一 -El +E 
1 o| HE 十 | lh 中 | 2 上 | ， 
' ’ 1 ny : 


因此 (8. 4 艺人 渡 :存在 入 ,只 要 jj 一 N 十 式 就 小 于 1- B01) 
《十 (一 1)). 由 此 我 们 有 


十 一 
| -| G1), 1 -四 | - — £1 go 
大 | 而 
We te. Uj Nr 
{7,, 二 fF 1 (NN 时 ). 





即 z, 士 mrss, 把 画 式 相 加 就 得 到 ee iD) 另 一 方面 还 可 
得 到 2 EA bn,, le ( i 
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2 十 和 0 


所 以 一 和 于 是 我 们 得 到 br 其 
个 随机 灾 址 ， 而 旧 它 必 须 是 和 名, 即 有 有 
尼 0 Cp), 
由 此 还 得 到 天 | 有 六 | x0. 从 而 
Ke Eb Ek Efe, Vart, ~ Vart,. 《8. 5) 
进而 


fe, — limfiew, = limews, - Yvert 一 va 


可 见 和 仿 服 从 G iauss 分 布 . 
推论 1 设 1551ET) 是 Gauss 系 . 有 
和 岂 是 一 个 Gauss 
证 明 ” 当 z 十 ee 时 .和 有 
PO EC — Hh) 0, 
订 见 
fs = Ey = lim gs, 
2 = EW CO— EW)? 一 limE 一 Ed), 
on = EC — ER) CN -— Ey) 一 limo,'™, 
其 中 Gu ED EEO ED pe y, 于 是 


1 
Ee limECeT Ww ) 一 lime'% 和 一 六 Vein 


一 ee 六 


HN Cn see ) 遵 从 {auss 分 布 ， 
定义 8.2 两 个 Gauss 系 5 一 信用， 3 一 {?: 5 称 为 独 
下 的 ;如 果 对 任意, 用 正人 :5E 随机 商量 ( 纪 ， 
全 与 随机 向 量 (9 ,独立 
302 








条 光 定 多 (8 让 以 攻 凶 记性 用 特 琵 随 数 的 描述 ,我 


th Causs 条 
们 立刻 训 得 到 : 
7 扯 丰 
EE ED En 
个 Ga 系 证 依 概 次 收复 写 多 下 的 著作 辕 包 是 个 Grauss 
条 , 苇 尼 个 线 上 宇 阅 -我 全 可 以 在 这 企 瑟 氏 王国 打下 芝 志 各 


人 (8. 0) 
| 机 于 下 一休 内 和 全 车， 
注 : 由 全 + 是 天 随 集 ,这 不 扯 委 空间 让 下 于 昔 的 人 下 个 本 here 人。 


昨 芝 : 轴 二 广 借 起 荆 : 赤 订 者 二 二 其 随和 变节 市 插 队 技 数 竺 期 组. 然后 主 芭 全 
站 过 本 pa. 于 .这 在 可 记 谍 于 虱 计 世 二 一 古 随 机 村 旺 都 是 效 学 期 蜡 为 5 
的 渤 轩 由 得 狐 戌 沪 
Em Erion. CB 
对 上 Cianss 条 来 说 .共生 在 上 述 内 积 下 正 妆 . 即 

(0 
盾 乏 村 任 启 实数 ion, 都 有 

Dab 一 人 人 一 


也 就 赴 说 了 本 二 中 舍 -个 壤 正 奖 , 就 意味 疹 它 与 元 0 中 入 一个 也 
机 具 让 都 正安. 也 就 是 它 与 LL(5) 独立 ， 
4. Gauss 系 的 投影 


在 实际 癌 题 由 .常常 有 些 随 和 朱 变量 不 能 被 育 接 观 测 独 ,而 只 衣 
通过 其 他 有 关 的 可 观测 随 几 变 塌 族 去 估计 它们 . 通过 可 疯 测 的 随 
礼 变 其 笃 样 去 衙 计 最 为 近 僻 昵 9 小 面 的 命题 给 出 了 :个 最 优 佑 计 
的 判 列 淮 则 ， 

设 随 机 赛 工 族 - 岂 :rE7 ; 腻 可 观测 的 .7 是 -不 人 阶 纸 有 有 
最 的 随 策 变 续 ,不 能 该 直接 娄 测 介 . 现 要 由 4 去 估计 六 就 秆 怠 找 

-个 随机 室 城 加 9 C 它 是 了 的 陶 数 ?二 近似 代 棱 7 我 们 以 招 大 误 
可 








差 最 小 作为 最 优 的 标准 , 那么 gt 引 是 wy 的 最 优 估计 的 舍 义 即 居 对 
任意 的 %(9) ,只 可 它 也 是 随机 变量 ,就 必须 有 
Ey— pOP EE — $I)Y), (8. 7) 
命题 8.2 ws) 星 7 的 最 优 佑 计 当 了 日 仅 当 对 任何 $() ,内 要 
它 是 随机 变 基 ,里 铺 1800] 过 十 : 必 , 就 有 
五 [7 一 90 一 0. C8, 8) 
注 ， 在 俩 题 中 对 什么 样 的 gc， ) 谨 足 (8.7) 的 条 件 以 及 为 什么 它 且 阶 
抑 并 未 交代 清楚 ,因为 缺少 测度 论 语 半 ,大 法 交代 清 , 其 实 满 足 (8. 7) 的 g(9) 
就 是 所 谓 # 了 对 的 “条件 期 望 ”. 
证 明 若 对 一 切 随 机 变节 (5s)，(8, 8) 成 立 , 则 
EC pO = Ey-- pI) gE — HY? 
= EO FON + LE — pS CGS) — 9)) 
EC) — gs)): 
= EC-- PO) + E Ch) 一 全 9) 
Ey pA)), 
反之, 若 ex) 是 最 优 估 计 , 则 对 任意 实数 4 有 
EQ FOP EE pF + WY 
从 而 
RE CNY + 2AELGT — gSIYI)] 0. 
因此 必须 有 
EL 一 so] = 0 
对 于 `- 般 随机 变量 族 ? 与 站 要 想 验证 % 满 足 (8. 8) 是 非常 困难 的 ， 
但 是 当 ? U {组 成 Gauss 系 时 验证 (8. 8) 可 以 大 大 地 简化 . 
为 了 方便 起 见 ,不 失 一 般 性 地 我 们 摧 EL.= 0 (ViED SS Ey 
等 于 零 的 情形 ( 否则 先 将 期 望 分 别 减 去 后 再 行 处 理 )， 
命题 8 2 设 5 作 GE 人 与 了 -- 起 组 成 -个 均值 全 为 0 的 


Gauss 系 , 则 ?在 Y 的 线性 闭 包 工 (g) 中 的 投影 节 ( 即 ?应 对 Vicr 


都 且 [7 -96.] 一 0) 就 是 由 9 对 7 的 最 优 估计 
04d 














证 明 击 了 7 是 了 在 工 (g) 中 的 投影 可 殉 能 有 表示 了 = gs) ,而 








内 对 作 一 个 1:€ 了 了 部 成 立 天 (07 一 - 7) 8 一 上， 由 Gauss 系 的 特点 
可 以 推 省 六 交 与 8 独立 ,也 就 与 任 一 形 如 多 (9) 的 随机 蛮 量 独立 ， 
因此 有 
EL BS) Ey 73EUCS 一 让 

财 由 命题 8 1. 就 得 到 ?是 山 sf 作 的 最 优 估 计 . 

倒 8.3i 波 流 } 没有 信 导 ( 随 机 序 刚 ) 国 一 1 一 1 2 
2 导 有 与 之 独 证 的 曲 丰 NN 一 1N,; 一 1,2， ,mi 的 干 搞 , 它 们 
都 分 别 是 期 筷 为 0 的 Gauss 系 . 已 拓展 一 下 (CS (Cn 二 1 
ml EN, NG). 试 求 出 由 {1X 一 S, 二 N,; 12 二 
值 让 SC ,2 ma 的 最 佳 估计 的 公式 (通常 人 们 将 这 旦 的 问 
十 称 为 滤波 ,意思 是 道 过 一 个 “滤波 ”运算 ,将 品 击 " 滤 上 ”)， 

解 将 5, 的 信 计 开 为 S,，, 它 应 是 5 3 让 1 1 一 112,.… ym} 中 


的 投影 .内 而 $, 一 Bax 而 且 满 是 下 列 方 程 组 


CN, 5, ， 妃 ) 一 昌 了 Y 玉 一 ] 
即 对 任意 massm 丰 


加 


ES,X,) 一 = EI 和 全 es 和 | 1 一 CC ， (8B. 9) 
A 二 1 


由 上 上 式 中 1S。 与 | AN) 的 独立 性 ,我 们 下 
四 — ElS(S, + 六] 一 天 SR + R= KR,,. 


右 > C9. 十 Ns Dy, 十 人 ,2 | | 一 入 as( 民 十 Phen. 
于 是 (8. 9 就 变 为 线性 方程 组 


4 二 ] 


VR, 十 Ph Da 二 开 (x = 1 2 )， CB 1O) 
| 


若 托 阵 六 人 (Ry ， 6 
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四 | 及、 | 

|。 A, | 
当 吕 温存 道 时 ,我 们 可 以 用 抽 道 大 给 出 解 , 这 里 略 皮 详情 . 特别 当 
H 齐 情形 ;到 民 ， :RE 5 1 一 FA- 1) (只 与 着 有 类 ) 时 ， 
上 上 面 的 (8. 10) 解 法 可 以 绸 入 宽 平 黎 列 的 框架 米 解 决 (参见 8. 3). 








5. 复 Gauss 系 


定 区 3 复 随 机 变量 系 # 全 活 十 邑 ; 1 全 了 1 称 为 复 Gauss 
条 , 如果. 是 两 个 相互 独立 屿 -EV) 与 (3 一 E77) 相同 分 布 ( 指 
所 有 相应 的 有 限 维 随机 变 其 组 C5 一 一 6) 与 Gh 一 
E97 一 7. ) 具 有 相同 的 分 布 ). 

注册 于 技术 了 上 的 原因 , 复 Gauss 系 的 要 求 比 实 Gauss 系 商 得 多, 这 
宇 久 的 喘 队 是 实 Gauss 系 并 不 能 乔 成 虚 部 为 0 的 复 Gauss 系 . 然而 这 pe 
的 好 处 是 使 实 Gauss 系 的 几乎 所 有 结果 部 在 复 Gauss 系 平行 地 王立 , 唯 -的 
改变 是 协 并 此 国 数 在 和 Gauss 系 应 定义 为 

下 人 
(其 中 代表 求 复数 的 共 乞 运算 ), 由 于 在 Fourier 分 析 中 当 出 现 枉 广 eu， 1 
号 用 上 这 区 这 各 a 公 实 过 程 ， 常常 | 党 “ 便 、 


























《8 2 有 具有 二 酚 矩 的 过 程 


1 ， 窜 平 稳 列 概述 





定 父 8.4 随机 变 书 放 {,:n 之 0} 称 为 宽 平 稳 的 ,如 时 Et,, 
Sw 车 不 依 菩 .iI 
Hm) Ee, ). Rem) — EG, — EC)(E,,,,, — Et )). 


cB.11) 
306 





| 分 别称 为 5 的 相关 序列 及 协 方差 序列 . 宽 平 稳 到 -各 世 称 为 
宽 守 移 时 间 序 列 . 实际 中 的 -个 重要 问题 是 :用 (5:% 室 0; 的 一 彼 
机 人 售 计 协 方 其 疗 列 RR 上 0) 及 期 电 下 1 下放 记 a 二 反对 此 我 
们 有 (但 在 本 书 中 不 圣 以 证 明 } 
定理 8.3 没 包 为 寅 十 稳 烈 ,EL 一 p 如果 其 协 广 震 列 ROm) 
满足 :ja -4 使 

BR | Ni 


= on 1257” 





| RA) -OF 二 cg.12) 
nn ! | 
则 


p! | ~ Yr, gg | 1 


| 


1 


首 守 则 | ， 计 > | 村 定理 条 件 (8. 12) 淇 站 ， 
意义 ”用 一段 现实 观测 ,如 的 平均 志和 估计 下 .这 个 定 
理 的 结论 说 明 这 种 牛 计 是 台 埋 的 (在 数理 统计 于 叫 黎 强 由 会 的 }. 
定理 4 设 世 为 宽 平 入 (auss 副 J 此 时 名 必 是 平稳 列 , 玻 
是 平 黎 Gauss 列 )， 日 Et 一口 又 芳 


1 Sn : 
RCR 0， (8, 13) 
1 
| 1 Srv- 
出 ?| Vt ROn|— 1. 
" 上 1 


又 若 |ROD 1 六 (a 祈 00), 则 (8.13) 满 足 . 

意 史 此 了 叶 呈 R(x) 用 世人 ma :的 平 拉 值 来 估计 ,并 
世 此 估计 世 是 强 相 人 台 的 ， 

本 研究 宽 站 侈 过 程 时 ,由 于 常 用 频谱 分 析 (Fourier 分 析 }, 故 
常用 复 的 随机 序列 六 一 多 十 达 ， 这 时 相关 函数 及 协 方差 丽 数 的 定 
浆 如 第 5 段 复 Gauss 系 那 样 :相关 上 贤 数 BCm ) 生 克 ( 和) 相关 

CH BUONO; 
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CB.2) |BGm) | 和 BC0) (这 是 Schwarz 不 等 式 ); 

(B33) B(--m)=B(m); 

(CB. 4) Ym CY ,年 阵 (Btn 一 7 .an 闻 0( 非 
负 定 Hermit 下 人 阵 ). 


2- 疝 量 值 随 机 过 程 


定义 8.5 依赖 时 间 参 数 !ET 的 随机 向 曼 族 E16,1ET} 
称 为 向 量 值 随机 过 程 ,特别 车 工 只 取 正 整数 时 刻 上 称 为 向 量 值 随 
机 列 . 在 不 会 出 现 混 淆 时 ,我 们 常 把 “向 接 值 "三 字 省 去 . w(1) 人 EE 
.CtE7) 称 为 的 均值 向 量 值 函数 . RG,s) 人 ECE 5&7) 称 为 6 的 协 
方差 算 阵 信函 数 ,其 中 &7 为 & 的 转 终 向 晤 . 


8$8.3 ARMA 模 型 


1. 一 般 概 念 


在 第 六 章 中 我 们 曾 讨 论 过 作为 马 氏 过 程序 用 的 特例 的 AR 楼 
型 与 ARMA 模型 . 这 里 ,我 们 从 一 阶 矩 过 程 的 观点 ,简单 地 作 一 
个 介绍 . 

定义 8.6 若 & 为 不 相关 随机 变量 列 且 Ee, 一 0, Ee,e, 一 各 ,， 
多 项 式 x 会 1 二 az 十 十 apz? 在 |z| 所 1 无 根 , 则 称 满 足 如 下 着 
分 方程 

Se 0 (8.15) 
且 6 二 0 的 宽 平 稳 列 名 为 阶 自 回归 模型 (Auto Regressive ). 
简称 为 AR(#p) 模 型 ,也 称 p 阶 宽 马 氏 模 副 (注意 ,第 六 但 82 例 7 
中 的 a 的 根 , 革 这 里 的 all/z} 一 0 的 根 , 直 二 pp ,4 一 
一 入 
定义 8.7 共同 定义 8.2, 多 贡 式 
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Hz) A B 二 Bz + Bz’ 
在 iz| 冯 1 无 根 , 则 称 如 下 的 名 为 g 阶 滑动 平均 模型 (Moving AY 
erage) .和 阶 称 MA ty) 模型 ， 
人 {18.16) 
要 求 在 |z|ss] 无 根 是 需要 的 ,我 们 可 举 如 下 反例 : 
例 8.4 全 二 225 .1 一 十 96 十 十 2 15 十 2 人 对 
初 值 $6 非常 秆 十 ,因而 不 可 能 尾 稳 定 的 系统 . 
把 这 师 考 统 :起 来 的 模型 为 : 
定义 8.8 苦 & 同 定 多 8.6, 闵 设 在 定 六 8.6 及 定义 7 中 多 
项 式 atz)y ,专人 帮 |=z| 所 1 无 根 , 窗 半 稳 列 6 满 是 :E50 及 
Stab te Pe, 1 |e, 8 17) 
吓 称 6 为 (p,q) 阶 自 回 为 滑动 平均 模型 ,简称 ARMArp,g) 模 型 . 
例 8.5 在 祭 事 用 途 的 散射 通 汛 中 .让 于 大 气 介质 的 变化 而 
出现 电波 的 涨 落 现 象 . 了 P, Monsen 在 1971 年 提出 了 带 反 馈 的 均衡 
器 以 光 服 这 现象 盗 成 的 失 澡 ,其 原理 图 如 F: 











全 8.1 


其 中 fe 是 下 到 前 信和 号 ,通常 是 带 信息 的 的 随机 刻 , 在 统计 学 上 药 
随机 列 的 性 质 非常 相似 于 id 绚 ， 所 以 在 理论 上 把 它 看 成 ji 册 
列 , 鸭 袁 示 楼 法 器 , > 表示 可 法 器 .一 1 表示 一 个 单位 的 上 时间 延 
所 , 出 是 通过 眉 个 带 反 组 的 均衡 器 加 工 处 埋 后 所 得 的 信号 . 只 
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要 对 加 权 系 数 ,BG 和 Sp wj 所 9) 加 以 适当 的 限制 ,使 4(z)y .8tz) 
在 ljz| 委 1 无 根 : 则 所 就 是 ARMA (Cp,9) 模 增 . 


2，AR 模型 
首先 的 问题 是 ;如 何 划 别 -个 期 望 为 0 的 宽 平 稳 列 是 
AARCp) ,或 者 是 MAC7) ,或 理 是 ARMACP) 或 者 什么 部 不 是 . 
当然 判别 的 条 人 应 加 在 还 方差 列 ( 此 时 即 相 关 序 列 ) 上 ,为 此 需要 
引进 - 个 概念 . 
定 芝 $9 没 { 二 :2 这 0) 是 宽 衬 稳 列 ,定义 a 为 
Elé, — Dane = nt 五 | 名 - -> 上 . ,| (8. 18) 


最 所 - -个 系数 a 称 为 第 上 步 偏 相关 数 ， 而 1al， 六 1 你 为 {8:7 
空中 的 偏 相关 系数 烈 . 

AR 模型 可 以 用 偏 相 关系 数列 刻画 . 

定理 8.5 如 果 宽 平稳 列 6 满足 6, 一 0, 晶 3 函数 广 =0, 使 


Nog/ 00d >- cr 


昌 RGD = je”ACodh (在 处 理 实际 问题 时 总 认为 此 条 件 是 满足 
的 ), 那 么 霹 是 AR(p) 的 充 要 条 件 是 第 户 个 偏 相关 数 非 0, 而 从 第 
十 1 个 往 后 偏 相关 系数 均 为 0, 即 

ci FO0, a 0 (Rp). (8. 20) 
如 何 求 偏 由 关系 数列 昵 ? 注意 到 各 是 要 值 同 题 (8 18} 的 
解 . 记 《8. 18) 等 号 加 方 的 大 为 Fat ,ee ,ot ), 于 是 (att ,eat ) 


aFr ，_ 2 
满足 Ma 二 0 (7 )， 也 就 是 


RIO) Ril) 1 ROE 1) 
Rl 二 “on 





Rel) 


(8. 21) 











oe 
REY 
[RE -1) Ra RN) J 
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这 个 方程 组 可 得 全. 然而 在 定 则 8 5 某 件 下 对 在 隔 的 二 我 们 让 
iu ;的 递 推 鲜 法 ， 
i RELY RN, 


oi Ry RYe ORO) RE Ya } 


.区划 





| (8. 221 


3 
a RR NR -Da eRO 及 Ce 


1! 1 


+ 


1 上 


这 个 说 指 会 本 的 推导 首 在 征 打 i 民 本 世 次 重 于 点 几 , 故 把 医用 
于 RO ,就 再 诈 相 关 商 充 厢 定 末 知 釜 数 , 这 就 是 ， 
定理 $8. 和合 癌 为 站 民 CpP) 时 天 二 一 二 , 副 
tn) RY ee Rip -- 1) 








R(tl; a oe | [Rl 
: : : ; 
RI) la) [RCR | 
IREp RD RD) 
Pil! NMR,. (8. 24 


| 


3. MA 模型 


MACD 的 兰 别 ,就 比 AR 的 对 别 容 呈 区 了 我们 存 
定理 8. 7 如 果 宽 平稳 列 名 满 是 :EE 一 0. 自 3 困 数 了 二 0, 体 
Ren 一 ee 
《在 实际 问题 处 理 中 .也 总 认为 这 
MA 的 充分 必要 条 件 为 
Rg) EV, RkY Cl 有 
在 某 件 满足 时 ,天 知 参数 疗 ， 可 以 册 二 演 放 程 给 














条 作 正 评 足 的 ) . 著 过 二， 是 


Rm) 一 Yi 人 (RS. 251 





解 得 {但 重 雪 满足 约束 条 和 件 所 >0. 此 方程 组 可 以 用 第 六 章 》6.3 
中 的 方法 求 近似 解 (或 差 的 平方 和 的 最 小 值 )， 
4 点 及 MER 模型 

对 十 ARMRig,g}) 的 漳 别 ,如 有 有 


定理 8.8 在 定理 8.7 同样 的 条 件 下 ,5 对 最 小 的 (p,9) 是 
入 RMRCp,0) 的 充 此 条 件 为 :了 蛋 沸 在 单位 园 引 的 bp 阶 多 项 式 


人 ff 一 了 (a, 一 17， 
使 得 
DaRem 一 下) 一 站 (mo). C8. 26) 


在 茶 件 满足 时 ， 未 知 系 数 es 们 即 由 ae 决定, 而 忘 们 则 由 下 列 非 
线性 方程 组 决定 : 


ywRdm 一 下) 一 D8,8,, (0 到 S 科 吕 )， (8. 27) 
各 一 9 了 
3 8.4 AR 模型 的 线性 预测 问题 与 Kalman-Buecy 滤波 


1. 预测 向 题 


时 间 序 刚 的 -个 重要 问题 是 项 测 . 在 卫星 轨道 测定 ` 控 制 及 反 
弹道 武 器 等 问题 的 研究 中 ,需要 由 实测 到 的 有 限 个 时 刻 自 标 所 在 
位 置 来 决 速 地 预知 它 在 下 一 些 时 刻 的 位 置 . 也 就 是 说 ,在 已 知 时 间 
序列 的 某 - - 段 样本 值 S. ,6 0044, 的 条 件 下 ,要 预 估 6, ,…-， 
5 由 3 8.1 命题 8.2 我 们 还 可 以 看 到 , 当 1&}) 是 Gauss 系 时 ,最 
优 商 测 - 定 是 -一 个 线性 预测 . 

最 简单 的 是 在 线性 函数 7,&, 十 7 1 十 …… 十 2%E 中 寻 最 优 的 
系数 C767 .70 合十 十 16 一 | 最 小 . 这 就 变 成 
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-个 简单 的 极 拍 问 题 .此 外 .对 商事 下行 器 而 童 .由 于 速 谋 总 ,轨道 
在 笃 个 单位 上 时刻 中 总 能 用 切线 上 向 很 好 地 代 些 . 因 仙 线 往 预测 虽 
涉 是 最 优 的 . 却 不 失 为 种 较 好 的 快速 简便 预测 . 
对 开 AREpI 而 并 :由 模型 直接 时 岂 帮 出 说 长 度 为 的 一 段 观 
测 总 分 炬 及 也 了 信息 ;由 于 二 十 
二 es 起 右 庙 不 他 言 寺前 的 信息 ,于 是 吉 ,: 的 黄 测 
值 白 然 地 丰 成 
































二 (Cat, +- oo ! 十 全 下 aoc pl) (8. 281 
而 帮 , 的 着 测 和 可取 成 
£2, 和 Ca, S 十 全 十 名 六 js 














如 此 下 去 .利用 58. 28) 就 能 用 :RGD 直接 作 韦 测 ， 

直 现 上 .ARMA 模型 可 以 用 AR 模型 近似 . 于 实 上 ,ARMA 
模型 移民 (和 总 可 写成 菜 个 /的 Fourier 系数 . 央 而 总 有 Ra) 
一 0 因此 只 要 取 声 充分 大 ,使 Res 和 00r 这 pp) .使 用 ARtp} 代 赫 
原来 的 模型 就 足够 好 了 . 

当然 ARMA 模型 的 戎 测 问 题 也 有 显 式 表达 ,实际 上 在 下 一 
段 的 Kalman- Bucy 滤波 已 经 包容 了 这 个 模 韦 . 

例 8.6 某 地 平均 年 降 丙 540mm ,已 知 其 俩 差 ( 降 十 让 -平均 
降雨 ?满足 AR C2; 模型 

,二 0. 548 | -0.35, 一 6， 
已 知 近 天 年 实际 隆 丽 景 为 560,470,585.496,576. 相 应 偏差 各 
为 20, 一 ?0,45, 一 44,36, 于 是 下 -年 的 偏差 大 测 信 为 :&， 入 
0.545, -+ 0. 3#.,, 基 








1 人 -0.54X36 十 03xX(— 14) 一 一 32.64， 
再 下 -… 年 偏 莽 预 测 为 ， 
$A 0.546) + 0, 36, 28. 43. 
第 .年 偏差 鼎 调 为 ， 
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2 全 一 D. 54 人 ， 十 0. 36, = 一 一 25.14 . 

这 样 二 华 内 的 降雨 量 预 测 值 分 别 为 507. 36.568. 43,514. 86， 
2， 滤波 问题 

1)》 背景 

在 观测 信和 叶 中 混 有 阳 声 干扰 时 ,就 权利 用 信和 号 本 身 的 规律 去 
滤 掉 噪声 . 这 度 是 滤波 问题 $8. 1 4 中 例 8.3 就 是 这 -- 类 问题 . 

最 简单 的 信号 模型 是 ARCP) 模 型 

6 = Mos, ,+ ww (8. 29) 


(8. 29) 称 为 状态 方程 (为 了 与 文献 一 致 ,我 们 把 $$ 8.3 中 的 & 改写 
为 ww). 而 实测 到 的 数 是 由 人 :2 空门 在 空间 传播 的 方式 与 量 测 嗓 
虐 wm 决定 的 . 假定 信号 通过 多 个 通道 使 到 达 各 接收 点 时 间 并 不 一 
致 ,于 是 汇总 各 接收 点 而 接收 到 的 测量 值 不 是 信号 &. ,而 是 显现 信 
号 过 去 值 的 不 同 权重 的 请 动 和 青 如 上 噪声 : 


Dé -十 和 
了 一 
我 们 把 它 记 为 加 , 即 
由 -上 
WD A 《8. 30) 


称 为 量 测 方程 . 

(8. 29) 8 30) 构 成 了 下 面 将 要 讲 的 Kalman-Bucy 模型 的 核 
心 , 它 比 日 完 的 名 二 十 v0, 的 模型 更 切合 实际 ,上 日 得 含 了 后 青 . 

为 了 数学 十 与 实用 上 方便 ， 我 们 还 正 要 把 模型 改写 成 上 本 阵 形 
式 , 并 把 数学 模型 进 -- 步 叙述 清楚 ,(8. 29) 可 以 可 成 








| “| Ro “S| J En 

| 1 0 [| 名， 上 | 

| 1 -| | | :|| 08.29) 
| | | 
| | ] 

(Sl 0 1 os ,! lo) 





鲁 可 以 好 成 下 述 和 证 阵 形式 
请 (是 玉 的 特征 根 均 作 121 筷 1 外面 )， (8. 29》 
J (8. 300 负 汀 这 守成 


| 
| 
了 , | I (BRB, 307" 
“ | 
| 


A 


好 革 臣 下 述 香 阵 形式 (7 履 与 威 w》: 
ye Hr tb,. (8. 30)” 
(almom-Bucy 模 融 ,站 室 上 ,模型 
(2937 汪 上 人 53. 20 为 广 . 和 数学 二 可 以 让 明 如 下 的 定 元 
Gauss 定理 如果) 为 ARMACp, 虽 ,央企 丰满 是 (8. 29)" 
中 的 模型 (适当 选取 下 .Ptae 及 六 的 分 其 ) 便 忆 恰 号 的 第 -- 
个 分 最 . 内 此 (8.29) 外 使 了 ARMACpe 所 以 可 以 这 为 
Kalman-Bucy 模型 是 和 ARMAIAODI 的 月 然 推 广 ， 
和 区 (8,29) (08,30 二 比 (8.29) 718, 30) 和 为- 股 . 在 
8. 29)7 8 307 ar 莉 台 一 维和 的 .为 px 1xp 
生 阵 . (8. 297".48.300" 将 可 以 讨论 和 更 彰 洁 的 博 形 . 
2) Kalman Buey 洪波 模型 
方程 引 
Fr ti. (8. 29)" 
Ce (9. 30)" 
(其 中 zx, 是 维 向 二 人 过 程 , 态 , 是 > 维 向 最 全 过 程 , 兴 .六 是 六 维 
问 氢 什 注 保 , 六 ;pppXr 昌 HimXx pM.y, 风 值 为 0 的 .相互 
独 下 的 自 品 点 到 (独霸 间 分 布 列 ECW, WD) 二 Q ,Ey v1) RR 
和 上 全 的 祝 家 未 知 阵 的 转 置 运算 ,这 里 4,; 是 状态 列 , 代 表 信 妨 ， 
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{9 是 对 [的 观测 列 ,而 {2,} 是 观测 误差 列 ), 给 出 了 Kalman- 
Bucy 滤波 模型 ,它们 分 别称 为 状态 方程 及 量 测 方 各. Kalman- 
HBucy 滤波 就 是 要 从 观测 列 % 出 发 递 推 地 对 x 作 佑 计 , 即 利用 对 
1 的 估计 和 值 ( 记 为 7。 1) 及 名 给 出 对 二 的 估计 值 7 . 它 的 原则 
县 :车 已 知 z,， ; 则 选择 矩阵 4,B, 使 方差 年 阵 
A FI, -CA FT BD, — CAr, + Bh)T] 
极 小 (对 称 非 负 和 矩阵 称 为 Ci 实 C; ;如果 CC 一 为 非 负 定 ) ;并 取 
了 ,一 4 十 By, 

作为 对 zx, 的 估计 ,fxv ) 称 为 位 ,} 的 滤波 列 , 从 位 ,) 得 到 滤波 什 列 
(x, } 的 装置 称 为 Kalman-Buecy 滤波 器 . 

注意 到 妨 是 4A 与 B 的 "二 次 式 ”, 可 以 由 “ 配 平 方 "方法 求 4 
的 极 小 ,这 个 做 法 思想 很 简单 ,但 是 写 起 来 有 点 累 次 ,所 以 我 们 直 
接 写 出 结果 ， 

4 =— (i — BH)F, 
[8 = HTHHHT RY! ( 记 成 天 )， 
其 中 
“QQ 
P, AE zx) CE zx) (被 波 方差 阵 ). 
把 吾 改 记 为 外,, 那 么 
一 人 一 大 PDIF {KY 
= Fr fF Kb, — HEFL ). 

发, 区 称 为 (噪声 ) 增 益 系 数 ,上 上 式 右 端 第 二 项 是 量 测 方程 作出 的 
“附加 ”贡献 . 

这 里 P, 的 取 值 并 不 很 重要 , 而 之 可 由 我 们 对 系统 的 认识 来 
给 定 , 有 时 x 可 取 为 0, 而 P, 可 取 成 初 值 记 的 方 其 阵 ， 因为 在 

318 














Kalman-Buey 滤波 理论 中 有 -条 重要 定 埋 ;在 FF,1i ,了 I 个 
相当 呢 的 条 件 { 称 为 可 观测 条 件 ) 下 , 当 x 一 并 村 PP, 总 有 和 与 
美的 极 艰 . 这 说 明 只 要 充分 大 ,特殊 取 的 启 。 所 六 二 的 影响 并 可 
以 消除 的 .同时 出 寺 天 ,一 产 大 ,应 不 向 其 个 天 .也 就 是 递 椎 到 适当 
步 数 后 天 可 以 不 必 再 变动 计算 了 ,这 就 减少 了 计 和 始 量 ， 

综 上 和 出 ,Kalman-Bucy 滤波 必须 先 有 模型 套数 上 ,TQ ， 
R. 从 一 些 * 训 练 "数据 zo viv 来信 计 这 些 参 数 , 这 是 
模型 的 优化 氢 合 问题 . 一 般 地 它 的 计算 量 较 大 ,在 实用 中 ,如 果 用 
(8. 29) .8 30) 进 似 地 替代 .有 时 也 能 得 到 合适 的 近似， 

注 : ,JQR 可以 依赖 上 nw, 这 时 科 到 的 时 韭 时 齐 的 Kalman- Buey 
滤波 器 . 

进一步 过 有 不 少 技术 性 同 题 , 有 兴趣 的 读者 可 参考 ， 

《离散 时 间 系 统 的 数学 方法 28, 中 科 院 数学 所 酸 罕 组 ,二 防 工业 出 版 社 ， 
L975. 








$8.5 附 录 


1. 条 件 期 望 的 直观 定义 


若 (, 儿 是 离散 随机 变量 , 记 
二 (下 一) = PE 一 人 入 一 y,)，, 

已 是 ?一 w 条 件 上 # 的 条 件 分 布 的 数学 期 型 显 见 它 是 y, 的 呈 数 ， 

不 妨 将 这 个 函数 记 成 gly,), 奢 么 
EFID oy) = ply,). 

力 一 方面 ， ,如果 性 ,7) 扩 有 联合 分 布 密度 f(x,y)， 邦人 么 在 7-- 
>y 杀 件 下 习 的 条 件 分 布 密度 为 
A(z) 


Tv) 之 ， 
本 辣 


其 中 户 Cm 为 了 的 边缘 密度 户 (y) = je dz 三 关于 这 个 条 件 
Etsy 一 y= [us 
它 也 层 » 的 隙 数 .我们 也 把 它 记 成 gy) 1 凤 EE(19 二 9 二 ly), 当 
7 不 联 定 值 y 村 ,ww(?) 是 一 个 随机 变 基 ,于 是 自然 地 可 以 定义 ; 
EID 人 gC) ,并 称 它 为 < 关于 了 的 条 件 期 望 , 它 是 ?的 一 个 明 
数 ,因此 它 大 随机 变 基 , 即 
Dzipe, 


EID 一 一 
Dp 


( 当 (5,7) 有 离散 联合 分 布 ), 其 中 
Pars, 全 了 人 二 ,7 二 3 











[xf tr par 
ElS|n) 一 Py ( 当 (E .7) 有 密度 A ， 





此 处 六 om 一 |/ (rsy)dz 
条 件 期 户 有 阿 个 重要 的 特征 性 质 ， 
(1) (EI) 是 9 的 蜂 数 ，; 
CE;) 对 于 任意 随机 事件 4, 有 ECECG D1) = ECéle,). 
证 明 (EE,〉 若 (&, 办 离散 . 则 
EES Y= EFPIA = DoT yd/ Sp,.. 


rp » 





= _ Per ce) 一 Elta). 
类 似 地 可 以 证 明 , 当 习 ,7 有 密度 Fr 时 ,仍然 成 立 . 
{£21 有 - -个 等 价 形式 : 
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ci 于 任 起 “好 的 ” 朱 数 g( 这 种 是 数 可 以 通过 连续 吨 数 着 

通过 * 多 次 ”极限 过 程 得 到 , 称 为 Borel 因数 ) 均 有 
ECECETatn))} — Elép(ty)). 

最 向 是 0 的 特 跌 情形 ,这 时 Cy) 一 Cv) 从 (RE ) 
种 5) 以 通过 (测度 论 的 } 极限 过 程 得 到 ， 

再 罩 , 如 果 名 (让 灌 足 ;对 任意 Borel 孙 燥 5 均 有 Et st)) 
一 上 (Sa) 则 对 gl) 二 CS 1 必须 有 

天 (人 EET — Oo. 














这 尾 轩 为 :六 
EO = Ete FEE TE — Egyptn)), 

取 g 一 gp, 便 得 六 C8O9) KP) 二 0, 国 此 (9) 与 (9) 概率 为 | 地 
相等 . 

让 此 可 四 如 华 %(7 淇 是 

三 CE = ERO (CY Rorel 了 数 &). 

届 么 到 (| 与 (站 只 差 零 概率 于 件 . 我 们 容许 天 0 人头 - -个 示 
慨 率 刷 件 . 即 若 请 (gC9) 才 EG|9)) 二 0, 风 总 认为 一 RCI) 
‘不计 零 概率 ). 

这 样 ,我们 可 以 说 (5137) 满足 下 两 个 条 件 的 唯 -- 解 ， 

CE) 是 7 的 阴 数 (9); 

(Eye 二 避 (ED DCY 随机 囊 件 4) 

当 (, 史 既 帮 离散 型 , 义 没 有 联合 密度 时 ,初等 的 定义 就 没有 
T. 然而 即使 在 简单 的 情形 ， 也 党 会 届 见 .例如 号 二 = 上 (7 有 ? 非 
离散 的 情形 . 但 是 在 直观 上 显然 应 深 有 天 CC 127) = 及 C9). 如 开 我 
们 对 不 管 什么 类 有 出 的 (8,9), 均 用 满足 0 CE 的 cy) 作 为 
全 更 的 推广 了 的 统一 的 定义. 那么 显然 地 有 达 人 (1 二 67， 

可 见 对 般 的 (6, 妨 应 该 定义 (1) 为 满足 (ED, 的 解 . 
六 个 解 必定 存在 , 但 是 要 证 明 这 - -点 就 需要 用 测度 论 的 于 旧 ,本 书 
不 司 涉 及 ， 

我 们 还 可 以 在 离 数 与 有 密度 情形 验证 以 下 等 式 5 宙 实 上 上 利 十 
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CE) 下 (Eo) 可 以 证 明 这 些 等 式 对 于 一 般 情 风 也 于 确 ): 
(1) ECECEIPYSE NY): 
(2) 车 #.7 独 羡 , 如 ECE19) 一 上 (8); 
3) ECDEID EA ED); 
4) ECatl BE nae nH BE Ey), 
最 后 ,还 可 以 推广 刘 对 多 个 随机 变量 的 菜 件 期 望 , 定义 
ELE ID sD) = FV), 
其 中 
FW) = EEN = pe, Oo 
同样 也 有 
C1) ECECEI Rp)) = ECE): 
(2) 蔡 诗 与 G0) 独立. 则 EC 和) 一 (5)， 
C3 LEAP se SI se 0,) 
一 hm ECE | 
I i 
G4) El Pat lm TD) DE | ,Ds 
3 一 上 1 


C5) 若 g i900) 人 Ehtad) DD); 则 ECO,E) {7) 一 PD, ). 
特别 , 蔡 二 7 独立 ,网 瓦 (RE 713) 一 有 (1 ,其 中 ga) 人 Eh(a,&). 
应 用 设 三 不 可 观测 ,? 可 观测 ,希望 用 了 的 某 个 基数 产 (力作 
为 去 的 据 测 ,使 
ECE — h(PY = minE(é — gO) 
我 们 来 证 明 这 个 最 佳 预测 是 87? 一 巨 (引信 .由 靖 题 8. 2, 这 只 需 
验证 对 任意 g(t，) 有 
El ECEIP) |g(y)) = 0. 
注意 用 性 质 (3) 友 人 性质 (1) ,我 们 得 到 
左 二 EC(ég nD) -- ECECSID) gO)) 
= E(ég(7) — EC(E(g (HE)) 
= E(tég(7)) 一 下 Cg) om 0, 
这 就 验证 了 ;在 均 方 误差 作为 标准 下 ,用 去 预测 的 最 佳 预 测 就 
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是 条 件 期 望 ECS|7). 
类 个 地 ,用 六 ,… 了 去 预测 “, 则 最 住 均 方 参 测 为 
RCE. 人 
例 1 (EN Cop), 这 时 
EET A pot - pa). 
例 2 (AR 模型 ) 
EW 
其 中 {W,} 为 独 并 后 分 布 列 , EW 二 0, 由 于 这 时 入。 ee 
<，, 独立 , 故 
BEE SS, 
A 
= a Ta 1 二 十 pS pl 


习 题 


]， 对 Gauss 系 定 义 相 闫 短 阵 BG 让 人 6.5 , 期 型 国 数 为 
ma 一 天 < 证明 
1) By5) 为 非 催 定 的 , 即 任意 ty sts, 旭 阵 CC4 st 2 
为 对 称 非 负 定 ( 即 对 于 任意 实数 em* 恒 有 
> Bl ao, 芝 


18 =] 


对 复 Gauss 条 则 RCGr ,由 人 ELE 是 Hermit 非 负 定 , 即 CRG ,1,)) 
一 (RD ( 指 共 绝 转 算 ? 且 对 于 任意 复数 上 四: 恒 丰 


Dre daa > 0, 


2) & 的 分 布 ( 指 -已 有限 继 分 布 ) 由 WO 太 天 (5 完全 玉 征 
(对 复 Causs 系 也 有 相应 有 结论 ). 
2。 对 息 Gauss 系 证 明 





Eb = ORL) = Ekk.. 
3. 复 Gauss 系 【 一 上 十 有 实 部 与 万 部 合 起 米 ;#SUY, 是 实 
Crnuss 条 . 


4. 复 Gauss 系 上 相互 正 变 ( 指 所 有 的 元 囊 癌 入 痢 相 互 还 奖 ) 


& 
的 充 上 要 条 件 是 机 瓦 独立 ( 指 WYrn 及 站 并 维 随机 向量 族 ， | ， 


E 1 
人 | 恒 为 相互 独立 )， 
并 
5 试 对 复 (iauss 系 定 久 荆 (5) 并 证 明 它 仍 是 复 Gauss 系 . 
6， 对 个 列 情况 举例 ， 
(1 再 个 trauss 随 祝 蛮 量 的 和 可 以 不 是 Gauss 随机 变量 . 
(2 两 个 (iauss 随机 变量 不 相关 全 可 以 不 独立 ， 
7. 证 明 (Stein 引 理 )$~N (0,1) 的 充 要 条 件 是 ;对 任意 可 微 函 
数 放 只 要 [1 Cn) let “mdz < 0, 就 有 


EF (E) = EC EY). 
提示 :必要 性 用 


站 ye dy, re0; 
[| ye Mody, co. 
充分 性 . 令 为 所)- 更 (rn 的 解 , 靶 中 
Br) = f edy. 
8. 若 欠 独立 且 均 遵从 10,2xj] 上 均 和 名 分布, 问 
& = Sacos Cn 十 中) 
是 否 宽 平 稳 , 是 各 平稳 ? 
9 复 随 机 列 


和 2 


一 erm (4 两 两 不 相等 ) 
1 
了 22 





宇和 


二 的 


1. ] yy i DI 
- 下 
到 ,Ee 1 训 币 ， 
{1 二, 为 宽 生 和 略 . 


。 _ 1 | ~、 1 | 
C2) Ren) 二 | 本 | 全 ee l2da. 


上 


站 ， 芒 二 为 MA 则 
一 去 | 2 le “) | -da. 


证 :此 某 件 实 如 上 也 充分 
12， 六 满足 £6, 一 0; 肝 


REny — 二 er dh 
971.， 


jate *): 
续 中 at 的 二 根 均 在 lz12>71 中, 则 名 是 AR. 
注 : 蛇 杀 件 实 史 ; |. 世 必 览 . 
13. fo? 为 Ld Ee = 0 Bw 一 46 一 a 本 十: 则 轩 的 
nM 茸 雹 |; 


了 
二 从 宽 平稳 ? 是 珍 站 稳 ? 
14- 4 0 6B, 了 以 下 哪些 是 寓于 稳 的 ? 相关 函数 是 什么 ? 
[和 
(C2) 全 
(3 二 wcos tin). 
15. 阳 为 正 态 列 .一 0YnS0) 证 则 
ECSE SEE) = mo rr G0, + as 


其 由 总 全 天 导语 .如果 再 没 二 "为 ARMA. 寥 RO) 一 (66 ， 


会 


一 Co » 
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证 由 


ER RR — Rim)) 
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六 DY RG RE rm) RE 


tno 0 No 1), 


AR + mm) O| 二 ] 





第 几 闸 ”Markov 过 程 与 随机 微分 方 入 


SN9.1 平稳 Gauss 过 程 与 Markoyv 过 程 


1. 平稳 Gauss 过 程 


定义 1 帘 1 是 i RY 称 为 宽 马 氏 的 .如 果 其 相关 
i 疯 歼 有 (下 EE ,连续 .而 日 对 任意 ;3 记 0.1 全 民有 
A 1 2 - , ， 
nf 本 EA - Das 时 一 inf |&.,, 一 ae (9.1) 


1 在 向 谨 中 | 离 (内 和 人力 全 于 (67) 对 应 的 上 距离) 下， 用 党 程 在 ， 
前 的 :1 的 有 了 限 线性 组 台 去 近似 所 其 最 佳 的 近似 其 
需 站 Liat, at RL 中 找 . 

村 下 党 蕊 开 的 宽 平 稳 注 程 .69.1 有 油 必 然 在 某 个 (依赖 于 
的 Ja 箱 达 到 我 们 记 此 a 为 ats) 再 则 , 凤 然 (9 10 成立. 那么 对 任 
四 ws0 肥 而 均 有 

A 
从 而 对 Yaw . 由 命题 8.2 有 
(6 OF) EUS eet ) 0, 














-I 
二 


Bls Tu) als)Btin), {9.2} 
申 z 一 0 我 们 得 到 af) 一 疙 (7 三 是 在 9. 2 两 请 除 以 B00) 
这 便 得 到 

Ge (st 2 OY). 

刊 用 B(5) 的 连续 性 . 妈 ts 的 连续 性 ,及 eg) 二] 一 af0) ,我 们 有 有 
cs 
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这 样 Ci 一 AD 2 0) 下 Cs) 一 和 
注意 .7 -0 才 于 于 一 0 如 总 以 概 浴 为 地 为 全 人 而 训 一 才 
A EE RIESE), 是 ECEE.Y = ‘Ee Schwarz 不 
等 式 的 等 民情 形 , 国 此 撤 康 为 1 地 去 与 成 比 殉 , 胃 存 在 常数 a， 
储 二 一 a 人 和 亿 旦 村 沉 玫 稳 性 .EE 庙 性 鹤 类 wy 所 上- a 和 a 
一] 从 府 世 二 6, 从 而 以 上 7 一 0 太 80 的 情形 都 是 退化 情形 . 对 
王 非 进 化 博 形 我 们 便 得 划 
ls) = Ye PY 0,s 0). 
再 则 , 当 s 二 0 时 ,我 们 显 见 有 (注意 这 里 违 实 信 一 维 宽 平 丛 过 
程 ) B05) = BC .于 尾 且 G) -= Ye” (s < 0), 合 起 来 便 有 
BC) = Ye (OP 0). (9. 3) 
命题 9 1 对 于 具有 连续 相关 函数 8() 的 实 值 非 退 化 宽 平 稳 
过 程 人 ,EE 了 R) , 它 是 宽 马 下 的 充 要 条 件 为 
Bo) = Ye FP. 《9. 3) 
证 明 必要 性 已 证 .下 面 证 明 充 分 性 ,不 妨 设 * 六 如 这 时 由 
《9. 2) 对 于 任意 z 芝 0 有 
(Bs € SEE = Bs wu) ee SB) 
= Ye din eye mn. C9. 4) 
在 x 二 0 时 ,由 (9. 4) 及 命题 8.2 得 
Elé.,.~e 人 0 
再 任 取 ?并 分 别 令 rz 下 由 (9.4 我们 得 到 
Bi 1 
和 inf .五 |， 一 - ae | | 可 
多 由 于 如 Le 可 以 任意 内 也 可 以 任意 ,所 避 
Ejé,- er! 人 
从 而 (9. 1) 成 立 ， 


命题 9.2 宽 平 稳 Gauss 过 程 是 平稳 讨 得 . 
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证 明 设 : 术 三民 富平 隐 ，EE 一 由 (一 天 人 ， 材 么 出 
Gauss 性 (6 1 站 的 联 会 特征 聘 数 为 


i 
Ae + 

其 中 4 二 (he 和 714 为 它 的 转 轩 :而 守 二 (RG, 一 让) 
RO 一 BO) m 出 于 站 各 依 输 避 0 各) 而 与 (无关, 因此 
(S0010 的 联合 分 布 函 数 就 与 1 无 英 . 这 说 明 售 ;rt EE 有 R| 是 
于 稳 过 程 ， 

命题 3.3 上 非 退 化 的 宽 马 氏 的 平稳 Gauss 过 程 1 二 ,tfE RR}( 定 
义 钢 49. 3 和 在 任意 有 限 个 时 刻 所 得 的 随机 癌 量 | 训 ，5) 必 有 具有 
联 台 分 布 密度 . 

证 明 不妨 假定 5 一 0. 出 命题 9. 1 本 命题 等 价 于 :对 任意 
et 

CBO, A), = Ye dr 
为 非 提 和 化 的 ， 即 它 基 可 逆 短 隆 为 使 记 革 号 简单 我 们 不 天 - 般 地 假定 
7 一 = 1) 及 (9， 2 我 们 得 到 
(6 一 全 1 1 0 (Gp 1). 
利用 入 :tfE RR 的 Gauss 性 就 有 有 :全 一 er 外 (有 
相互 独立. 现在 我 们 用 数学 归纳 法 去 征明 (有 有 联合 密度 , 当 
41 时 ,和 一 Ni) 显然 有 壳 度 , 今 假定 对 %=m -1 时 有 密度 ， 
并 记 它 为 aaw 1), 往 这 对 于 4 二 mm 结论 也 成 立 ， 为 此 我 们 
册 记 各 全 名 -em 这 ,其 六 莽 为 
Vary,, — EE i é, ,2° 


一 BY ~ 2 or fn 有 (一 .二 ee Min mB) 


Ar 


一 1 一 - 蕊 2 网 1 


吾 N01 
,0 ) 有 和 密度; 


ETL 12 [2rtl 一 3)] i 二 一 一 





于 是 (二 a ;就 有 密度 
tC, yt — etr, a ,) 














1 _ _ t er | a 1 和 
VIR Te Tn 9 “0 
(9.5) 
推论 。(& .2 ) 的 联合 分 布 密度 为 
er ey re 
机 一 i 
Pits st Oo -了 -ea 志 2 一 








Yar lL VOR CT Me) 
证 明 由 命题 9 4 用 归纳 法 即 得 . 
命题 4 4 非 退 化 的 宽 马 氏 的 平稳 Gauss 过 程 (tf:tE RRR} 在 任 
意 # 十 1 个 时 刻 志 < 有 <b<toCS 的 联合 分 布 密度 
记 为 pi (row) 它 具 有 以 下 性 质 











PP po Crs 
Pr Tl ) [i (x,y) (9. 6) 
证 明 出 命题 9.3 的 证 明 可 见 左 端 为 


em rm Jr I? 
LS 


一 (ze 1 





e ac 
VT ee Wm) 
这 个 表达 式 与 Flr sts. Ir] 1 克基 ,所 以 等 式 成 立 . 
命题 9.4 的 合 尽 为 :在 给 定 二 一 2 的 条 件 下 ,6 ， 
的 条 件 分 布 密 度 ( 即 (9.6) 中 的 左 端 ) 与 名 一 xz, 31,…, 名 二 xz 和 
关 , 它 就 是 印 ,， 在 给 定 的 二 x, 的 条 件 下 的 条 件 分 布 密度 ， 换 和 名 
话说 ,在 给 定 条 件 人 一心 的 条 件 下 ,& 与 (6 ，…, 名 独立， 
我 们 把 (9. 6) 酚 端的 条 件 分 布 密度 分 别 记 为 
Peel ps Ca 一 
那么 (9. 4) 即 
pr, 《rel |é, 二 7 一 Xx1) = Pr, Te | 全 = .rr,) 
进一步 对 x 在 区 域 (或 集合 )4 上 作 积 分 ,于 是 我 们 有 
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PE, EA = PE EE AIé ~— 2,). 
{Et 世 民 } 的 这 个 性 质 称 为 Markey 性 , 它 表 明 已 乔 现 在 二 1,) 时 
记过 程 的 取信 忒 一 z。 的 条 件 下 .过 到 的 取 值 分， 一 x 等 并 不 影 
响 将 来 (一 ;一 t) 的 名 ,有 取 值 的 统计 规律 . 这 里 的 Markov 性 , 正 是 
第 6 童 中 的 离散 时 间 的 连续 状态 Markov 性 到 这 续 时 间 的 推广 ， 

利用 (9.67 芒 归纳 法 我 们 可 以 把 命题 9.4 的 推论 改写 为 :所 ， 
的 联合 密度 


ra 
1 





一 Cr ps {Cry EE 一 71) pe Cr i 一 1 (C9, 5)" 
它 即 是 “初始 ?密度 pe, (x1) 与 一 系列 条 件 密 度 的 乘积 . 
以 下 我 们 只 考虑 4s20. 即 考虑 不 退化 的 宽 马 氏 平 稳 Gauss 过 
程 ( :ft 祷 0). 并 设 E& 二 0,B(0) 二 Ye ty. 改 记 (De 
>0),， 
Bm 和 _ 
vIn 一 e wm) 








办 人 EE sy 全 pe (Cyl 了 = 
(注意 七 述 右 端 与 ; 无关 ). 
命题 9.5 {prsy) 满足 Kolmogorov-Chapman 方程 ， 
plft + 了 证 = fp ss) pls, yde. 《9. 7》 


证 明 为 对 称 起 见 , 令 起 十 一声 yi 十 了 = ri ?文旦 一 
za 于 是 上 式 


有 有 吴 = pe (ze = ape = zd 








_ { pit, 《Te Pe CR Tet) 
Ps Cx1) Pe tt xz 


二 了 


ps 《1 sa ) 


pe tr) 





一 ps (zd 一 之) 一 左 端 . 





2. 实 值 时 齐 Markey 过 程 


定 光 3.3 设 随 机 过 各 人 入 s 计 0 的 任意 有限 个 时 刻 所 对 应 的 
新 机 向 二 人 .3 攻 有 让 的 联合 分 布 密度 未 数 , 而 条 件 分 布 密 
度 满足 村 任意 的 训 芝 过 志 及 1 安 0 部 有 


、 


。 (9.8) 
一 pe a $A pl 

吕 半 0 为 实 值 时 弃 的 Markov 过 程 , 又 标 jp.v) 为 这 
计谋 的 Markov 过 程 的 转移 密度 函数 . 

注 1 的. 站 尼 辣 号 策 作 人 在 状态 宅 癌 方 实数 祭 夺 的 对 诺 关 系 ( 芝 别 
让 有 下 级 数 撞 成 注册 分 ) 

显 册 ,对 上 上 实 作 时 弃 的 Markev 这 程 和 全 15501 所 有 :对 全 意 的 1 计 s5 这 
a 00 

站 
ELE A PE ,EAE = 1). 09. BY 

注 2: 定义 9.23 中 关于 存在 生 的 有 亿 维 联 全 分布 密 座 的 要 求 不 是 必须 
的 , 本 际 上 这 要 用 59. 8) 代 共 159. 80 作为 定 六 就 是 驯 了 .但 且 这 上 就 洒 要 用 
测度 论 的 知 证 ,在 本 节 牢 其 略 . 

注 3， 定 多 隶 2 由 的 时 讶 Markov 主 程 最 然 具 在 和 > 时 给 用 了 定 文 , 舍 
大 我 们 可 以 自然 地 利用 时 齐 性 补充 定义 向 一 有 pe Ce 全 下 ty 让 
不 依赖 了 基体 的 说 藉 而 可 以 评论 总 取 离 散 植 或 有 
沉 诬 的 情形 (如 季 利 要 蒂 名 一 点 科 数 学 芭 雇 -- Sueltjes 杠 分 ,册立 可 取 作 
总 的 随机 窗 和 1 也 就 晤 说 时 亨 Markov 这 香 和 1 全 6 冲压 以 扩大 为 时 亨 的 
Markew 证 再 和 3 并 搬入 一 晤 的 去 

例 9.1 非 退 化 的 宽 王 氏 平 稳 Gauss 过 程 是 时 亨 的 Markow 
过 程 ,退化 的 宽 马 氏 平 稳 Gauss 过 程 ( 即 y--0 度 一 0 的 情形 ) 
0 则 - 定 概率 为 1 地 有 名 一 ,其 中 名 是 一 个 Gauss 随机 
变 基 ( 止 态 随 山 蛮 斌 或 常数 )， 这 时 (6 四 并 不 你 在 联合 分 机 
警 度 , 我 们 的 征文 02 评 不 包含 这 种 衫 形 但 大 六 2 中 所 述 的 定义 

3 人 








就 犁 然 地 和 包 会 六 这 种 情形 , 这 伴 我 们 扰 古 : 灶 上 上 于 柱 Gamss 过 
程 来 说 常 马 氏 性 与 马 氏 性 (加 Markos 性 ?是 一样 网 ， 
例 9.2 2 中 定义 的 Brown 运动 是 诸 许 的 实 和 Markov 
过 程 ( 作 为 避 题 1 
定义 .3 转移 困 数 为 
1 “yy 
exp | 
《2 1 7 





pplive = pe (全 一 7) 一- 


时 齐 Markov 过 相称 为 ( 驮 数 13,7) 的 OU 过 程 (Ornstein-Uhlen- 
beck 这 征 )， 
对 此 我 们 有 
limptr.rsy) 一 Th NO0.7)). 
‘ 《2Y 1 
章 , 非 盟 化 的 宽 马 太平 稳 Gauss 过 程 ( 设 下 一 0) 是 OU 过 程 ， 
而 让 由 信和 1 的 分 布 报 为 N00,B00)) 一 NCO0,7), 于 是 册 


ps ty) 一 (prs ;sydxr = ost, = x pe Crydr. 


a e 二 
记得 1 一 ptrsy) 3 


CC 一 一， Wn 
记 g(x 了 由 上 臣 变 为 


Fy) 一 ee pt dr, C9, 9) 


定义 9.4 若 一 个 概率 分 布 密度 gtx) 甘于 时 齐 Markov 过 简 
(1 人 的 转移 力 数 pG ,ry) 满 足 人 9,9), 则 称 gp DN plisr, y) 
(或 全:1 主 01) 的 不 变 概 率 分 布 密度 昂 数 . 

例 9.3 N00, 放 是 OU 过 程 的 不 恋 概 这 分 布 密度 函数 . 如 果 
作 OU 过 程 中 图 志 ~ 和 (0.7 网 我 们 就 得 到 韭 进 化 的 蕊 氏 中 徐 
(rauss 过 程 ; 末 见 OU 过 程 与 平稳 Gauss Markow 过 程 的 网 异 具 
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在 王 前 者 在 tc0 时 名 可 以 不 必 局 限 工 苯 从 NO 

本 章 以 下 的 内 容 是 向 读 背 粗略 地 介绍 -种 广 常 见 的 连续 状 
态 , 连 线 时 间 的 苇 开 过 程 一 扩散 过 程 太 其 证 要 研究 工具 一 - - 随 
机 微 各 分 .由 于 这 部 分 村 容 涉 及 较 深 的 数学 内 容 , 要 式 正 表 达 清 
楚 . 测 虎 论 与 概率 基础 基 必 不 可 少 的 , 区 手 天 大 超出 了 本 车 大 部 分 
庶 着 现 有 的 数 党 基础 ,因此 .我 们 在 本 章 中 不 求 - 般 地 给 出 定义 与 
赴 理 ,而 居 从 一些 有 上 典 卉 意 义 的 特例 来 道 出 随机 微 积 分 及 扩散 过 
程 的 概念 与 主要 忆 想 ， 

















$9.2 Brown 运动 及 其 微 积分 


在 研究 函数 的 时 候 , 函 数 的 微 积分 是 其 精 舟 , 对 连续 参数 的 随 
机 过 程 .随机 函数 的 微 积分 也 有 了 同样 的 意义 , 函数 的 微分 与 积分 是 
一 对 所 道 的 运算 . 对 初等 函数 ,我 们 常常 是 由 研究 其 导数 入 手 , 进 
而 得 到 其 积分 及 微分 ;但 是 对 复杂 的 -- 般 函数 ,积分 却 是 比 微分 较 
容易 摘 清 的 ,也 切 于 作 近 似 计 算 , 因 此 ,人 们 也 党 以 积分 作为 微 各 
分 的 核心 . 下 面 我 们 考虑 对 Brown 运动 的 随机 积分 . 


1. 随机 积分 


设 人 18.(w) ;1 庄 0} 是 -个 - - 维 Brown 运动 ,又 设 有 且 依 赖 
号 的 过 去 的 值 的 随机 霄 数 瑟 Af 和 Cw) 3tE (Ca,6],w€ ni( 即 更 只 
依赖 {B,C ,si }， 中 对 任意 阳 定 的 ws MM ;w} 都 是 在 ta :上 
连续 的 实 函 数 , 而 有 

[gg dw < oo, 
类似 于 活 数 微 积分 中 分 割 求 和 了 到 极 限 的 到 近 方 法 ,我 们 这 里 也 考 
庶 … 列 分 割 ; 
A < =b Go 11.0.); 

人 PR 一 站 站 《mm-> 十 ~ ), 
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取 利 
Dw A DBT CB mm) Ben (wy 9.10) 
2 : 


如 困 !7, (oa)} 对 每 -个 都 存在 极限 ,那么 很 委 然 地 ,这 个 极 
限 就 该 是 且 对 旦 的 积分 ,但 是 ,遗憾 的 是 ,一 般 地 我 们 不 能 保证 
1,Cw)} 对 每 个 忆 事 有 极限 ,此 全 可 能 对 太 部 分 w.Ttw}) 都 没有 实 
数 意 久 下 的 极限 ,所 以 “极限 ”的 会 义 就 必须 改 二. 让 我 们 回忆 初 
等 概率 论 中 的 概念 : 设 有 一 个 随机 变量 ?7(o) 使 得 :对 Y e> 0, 都 有 

lmao, Co) 一 ?Ko 全) = 0. 《9. 11) 
我 们 就 称 ?ww 是 天 (wy? 依 概 深意 义 下 的 极限 . 它 的 意思 是 当 ， 充 
分 大 ,与 7 不 充分 楼 近 的 可 能 可 任意 小 , 记 为 hm), 可 
以 证 角 如 果 醒 (ti, 习 只 依 赖 1B,(w07 ss 所 z} ,那么 着 依 概率 意 六 下 ， 
(9. 10) 定 义 的 :7 有 极限 ,将 此 极限 定义 为 盏 对 避 在 (ae 上 的 
lo 随机 积分 ,并 记 为 
| was 和 | ec， dB, A Cp) lim Lu). 


一 般 地 ,随机 积分 是 不 能 对 每 一 个 周 定 w 分 别 定 义 的 , 还 要 
指出 一 点 ;在 和 数 ,Cw) 中 ,每 个 小 区 间 (64" ,a1."] 上 ,我 们 限定 
多 tia”,w) 取 作 为 多 在 其 上 的 近似 ,而 不 能 像 在 普通 的 应 数 术 分 中 
任 取 多 在 区 间 上 的 -- 点 的 值 为 近似 ,其 原因 是 ;这 里 相应 在 普通 
积分 中 An” 人 4 一 的 是 AB" 和 入) -- Bm (wm), 
后 者 是 到 值 复杂 的 随机 变量 族 , 虽然 

limAB,”™ = 0， 
但是 对 于 不 同 的 ww, 它们 趋 于 0 的 速度 很 不 -- 致 , 而 平均 地 说 
Bo (Cap 六 即 
EAB™ = EIB, om,— Bel? 


证 上 1 


























七 a 
Ee A] 


V an 一 EY) 
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ti A 
地 就 是 说 . 平 上 向 邮 Bi 趋 下 0 的 速度 大 大 要 下 1 
以 而 在 下 加 上 全 取 不 和 刹 的 点 的 更 党 作 近 似 和 ,它们 之 间 
的 头 罚 放下 可 牧 略 的 5 于 向 我 们 还 将 在 例 正中 再 见 到 这 事实》. 
以 而 我 们 区 须 限 征 生 在 Wi 分 割 小 区 间 上 的 取 值 方式 ， 
例 9.3 | BIE = 一 LB B2) 2 {1 — 5). 


这 个 绍 果 与 微 税 分 的 痪 元 公 趟 是 不 同 的 ,这 里 多 了 一 项 
_. 3 -- s)， 下 面 我 们 来 推导 这 一 结 


1,— MB Bi Bim) 








L 2 2 1 , 
一 (下 BD) -3 B® Bm)y 


十 上 
上 2 四 
(BC) 
侧记 里 后 -项 各 的 数学 期 望 是 


站 一 -1 1 。 2 1 Nr . 
EE 2 Br 一 A EC, ~ Bm)? 


一 > (四 【3 — fe ) -一 玉民 一 5 
面 且 它 的 亡故 是 


1 - 2 到 | 1 1 1 
E{h, 2 OF 8 DB | 
1 


人 了 ， i i 
= ETE,, Ly -3 me (Cf 如) 


1 、 
1 DECB, -- Bm )! 四 


4 


_ fa 23 





一 1 和 (34 ， a (ie 


此 
2 : tn 
一 一- > 一 2 
1 Cie 1 大 


.1 1 emt ry 
= 2 2 -i ) 


人 站 


当 于 时 .时 Chebyshev 不 等 式 


| 
了 | te 3 一) 


(Cr 5 7 站， 
| 


中 ， . 
| 


| 





可 风 
中 ww z - 到 [CBeta) 一 及 ro 5]| > e| 一 0. 
由 Ito 随机 积分 的 定义 ,此 有 即 
| ad — 0 一 B2). 了 (一 人， 


下面 我 们 再 来 看 在 (后 二 取 更 的 森 阿 近 伏 点 是 再会 
影响 积分 近似 和 的 极限 值 . 考 太 
LA NIB (有 一 Bm) 





1 1 所 了 
一 到 之 352 

1 厂 2? 2 ?| 
二 


BD SB Ry 
~ 3 
与 前 面向 理 可 得 


"il :Di ~ 
P|: | .| (一 二 - 3 el 《De 


可 见 声 的 极 艰 与 工 的 极限 差 了 (x - 垃 这 样 -专注 晶 主 我 们 再 次 
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强调 在 随机 积分 近似 和 数 中 被 积 田 数 外 在 每 个 分 割 小 区 间 上 的 
近 榴 必须 限定 !1t6 随机 积分 要 求 在 积分 利 式 中 限定 取 小 区 间 左 端 
的 更 值 . 若 在 每 个 分 割 小 区 间 (ea | 上 以 记 (B(" ,0) 十 
Drs 1 +) 玉江 代 马 ， 则 有 和 

i. 一 、， 加 CE 0 一生 Cr CB, Bm , (9.12) 

















而 元 在 依 概率 意义 下 的 极限 就 是 另 一 种 积分 , 称 为 Stratonowich 
积分 ,所 为 
| mas 人 | 也 :dc lm,. C9. 13) 
当前 面 的 讨论 ,我 们 容易 得 到 
] 2 pa 1 _. 
| 8.4a8= We BD) — 5) | 

















t+ TB — B+ G5)] 


， 1 2 加 1 2 | 
= 一 - ” 一 一 —-B, rr 
7 CB — B.) 2 | 


这 个 结果 与 微 积分 中 的 结果 一 臻 . 这 正 是 Stratanowich 积分 的 优 
点 .但 是 Ito 随机 积分 在 计算 中 有 其 他 更 多 的 优点 (如 可 以 利用 所 
滑 “ 喜 论 * 的 工具 》， 所 以 在 很 多 情况 下 ,大 们 更 喜欢 采用 它 . 与 普通 
质数 的 积分 类 似 , 随 机 积分 也 有 下 列 性 质 ， 

1 ， 线性， 


E 四 
| ($+ dB = [eqs 十 [was. (9. 14) 
对 实数 闻 
b 5 
[ 78.48. 一 中 dB, (9. 15) 


(对 于 了 只 依赖 于 1Bsixse) 的 某 些 随机 恋 量 也 成 立 ) 
IT. 可 加 性 ， 


得 r e 
| gap 十 | ua 一 [gas (9. 16) 
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(其实 对 某 些 随机 时 间 5 一 r(e)- :所谓 停 时 , 即 它 对 ws0, 使 宪 件 
fosrfoDsf 只 依赖 于 (Rn 安 引 ,小 式 仍 成 立 》. 


『 


此 外 作为 随机 ”积分 . 它 还 有 性 质 : 

















日 
到. E| ed 一 0 (9. 17) 
间 站 
RN ,五 | wa.| v. .| 一 | E(B, du, (9. 18) 
上 PP i ， ， Ey ， 
£ | dan — [kl@lsda. (9. 19) 





这 些 忻 质 的 严 覆 证 明 涉 及 测度 论 的 许多 知识 ,我 们 这 里 只 能 

略 去 了 . 担 是 为 了 个 速 者 不 争 寺 觉得 它们 是 "大 外 发 来 ?了 H ,我们 作 

- - 些 不 严格 的 阐明 , 由 于 和 对 函数 是 有 线 必 的 ,于 而 它们 的 极限 也 

应 有 线性 ,从 而 可 以 想象 1 会 成 立 , 类 似 地 了 也 不 难 想 象 应 沪 成 

并 ,于 于 {9.17) 一 C9.19) 成 立 的 原因 就 更 深 一 些 了. 这 里 让 我 们 看 

一 个 特殊 情况 :更 , 豆 部 是 时 间 的 非 随 机 旺 数 由, ,更 . 的 情形 ,此 时 
我 们 看 








El [SIGn Be Bn) 


vo, “EB Bm)=0. 


从 而 我 们 知道 ， 在 允许 极限 交 E 换 的 情形 下 
£| Gas 一 ECP limt,) = 0. 


及 一 方面 ， 
EI yD 1 ， 
| 7 EB, jC 号 | | DB 一 Bem ) | 
7 : 


Db mE(B, 四 B, 9 em). 


由 于 Brown | 运动 在 不 变 区 间 上 的 独立 性 ,上 式 应 等 于 
2% 加 到 五 [有 Jo 一 Bim )? J 





十 人 >) 中 EMECB, = 一 Bm) ECE, ,mm — Bum) 


i 
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访 包 
大 


bh 
二 AN or | E{®, YY, Yda. 


.to 公式 一 -随机 积分 的 换 元 公式 与 复合 国 数 的 随机 微分 公式 


在 普通 遂 数 微 积 分 中 ,复合 顺 数 的 徽 分 公 趟 与 积 分 的 换 开 全 
式 是 一 对 等 价 的 最 基本 的 公式. 在 随机 微 积 分 中 .我 们 也 有 这 样 一 
个 对 详 的 公式 ,从 页 就 使 随机 积分 的 概念 可 以 方便 地 应 用 划 许 多 
间 题 中 去 
若 扣 是 由 以 下 等 式 给 定 
太一 二 十 | cus)dB.e) 十 | ecoan {9. 207) 


(和 拍 记 成 8 一 上 rd 及， -bdu) :其 中 a 与 Db, 都 只 依赖 Brown 运动 的 
过 去 值 (5,;s 扎 4} ,而且 对 任意 固定 的 ,者 是” 的 连续 函数 ,同时 


1 了 
f letsyew} idw + co, [ | 站 (ao < 十 =， 


其 中 | 6Guow)du 理解 为 固定 w 对 “的 普通 积分 . 又 若 有 : 
数 (E472 对 二 二 阶 沙 滑 且 对 1 一 阶 光滑 , 今 
A A ft ) 《9. 21) 
(7 是 -一 个 复合 随机 函数 }, 现在 间 :是 否 有 更 与 g 使 得 对 xzE10， 
了 "J 都 有 
#0) = WO 十 | 到 dB 二 | saw， 


是 徊 能 刑 ap. 来 上 未 辐 枉 六 
[to 公式 完满 地 f 圳 答 了 这 :- 问题， 
定理 9 1(ito 公式 ) 对 >.- 阶 光滑 的 二 元 实 国 数 7(。, .)、 
村 (9.11) 给 定 的 & 一 多 ;5t 人 [0, 了 Tj]} 有 


DRE) WF | Yu, 8 dp, 


他 可 
! 1 五 2 BE | Ta de; (90,22) 
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或 以 微分 撒 式 号 为 : 





af 本 i oF 上 DA 1 风 i 站 
一 天 对 全 ad 屯 十 | 人 元 十 2 Ge 也 :| CF, elr, 
有 即 

和 中 
df Cb) = Yd de Td) 


其 中 Cd$)? 一 gidi. 
为 了 使 读者 能 直观 地 理解 fio 公式, 乱 们 作 一 个 下 严格 的 “ 推 


慎 ”- 
考察 
A B= 一 Fre 
-| 风 (EE Ls ~ &) + Ea, Ga | 
oF 
FS) by 
十 ,2 SE — EA 





十 far)"| 十 vtAr). 


Taylor 展开 ,在 第 -个 括号 中 除 第 -项 外 均 为 ofaty, 但 中 
(二 
一 一 At 二 20 
= oA 二 vt ), 


天 是 
Nf, - 
?va 一 也 一 ro AB, 十 pt wm) Ar) 
YG)AL+ 1 Eee Eo ,yA 二 oc), 
即 有 
af a 名 上 
本 了 二 ar tot, wd 十 ee. 和 ) - 4 WY.e 名 
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去 。 ah, EC， | dr 


倒 .5 设 op 为 常数 ， 3 一 ce 路 sd， 十 会 el。 
则 
一 75 十 | 一 fe-* 志 ds 十 je gesdB. 
一 有 十 | -一 Ends 十 | ca8,， 
9 站 


BB 
dy 一 -- 好 dt + oadB,. (9. 23) 
注 : 这 里 :有 } 星 -个 Gauss 马 氏 过 程 , 就 是 OU 过 程 . C9.23) 实 标 上 可 
在 作 一 个 以 勾 5 为 末 姑 过 程 的 随机 微分 鼎 程 (参见 下 一 惧 ) , 它 晤 早出 现 诗 理 
论 物理 研 窒 下 ， 在 那里 称 之 为 Langevin 方程 , 亡 实 上 了 媚 是 参数 为 且 一 沁 7 一 


的 CT 过程. 
例 9.6 设 
Zexpl | GdB — 3| edu| 
则 由 Tte 公式 推出 
dZ, = de = esd 十 eCde)’, 


艺 





exp 上 Et ， 《 纯 ， 24) 





[a 
一 2 上 Cexpét BdB, 十 | (oxpé, )| -一 BE ds 
二 上 3 5 Cexpé,)®,ds = 7, + | 了 有. 瑟 dB 
0 看 
出 此 得 到 
他 一 ZGdE ， 
2, = 1. (9. 25) 
注 : 《9.25) 也 是 - -个 随 宙 微 分 方程 ,事实 上 (9.24) 给 出 的 是 它 的 哗 
解 . 


340 


例 9 7( 股 票 的 Black-Scheles 模型 ) 
设 某 股票 在 1 的 价格 为 随机 变量 ,日 存在 常数 5,a( 汪 0), 使 
de = Ecpdr 十 ad 五 )， 
其 中 心 称 为 参 期 收益 率 ,s 称 为 波动 率 . 用 Ito 公式 可 验证 总 = 
|s | roB,| 〈 称 为 几何 Brown 运动 ). 


Ito 公式 成 立 的 范围 可 以 更 广 得 多 ,但 这 些 成 立 条 件 的 找 述 澳 
要 测度 论 的 语言 . 我 们 这 里 只 能 就 较 特殊 的 情况 ,把 Tto 公式 的 概 
要 向 读者 介绍 ,以 期 读者 能 领略 随机 微 积分 的 前 味 . 要 真正 完全 
地 , 严 衬 地 懂得 与 掌握 随机 微 积 分 ,读者 必须 掌握 基本 的 测度 论 知 
识 与 方法 , 具 洗 此 基础 的 读者 可 参考 [G] 或 [RY] 等 著作 , 进 -. 步 
学 可 随机 微 积分 . 





Sexp 























3. 随机 微分 方程 
在 2 中 的 .个 例子 已 经 给 出 了 三 个 随机 微分 方程 ， 
dz = — Bhdi + odB,, d2, = 2,SdB,, 


dé, 一 总 (6dr + odB.,). 
随机 微分 方程 (也 称 随 机 积分 方程 ?也 是 一 个 表达 随机 过 程 ( 特 别 
大连 续 肿 辣 . 连 续 状 态 的 马 氏 这 程 ) 的 -个 重要 而 方便 的 1 具 . 
随机 微分 方程 的 一 般 形 式 如 下 . 
E00) = E(wy +. Focust, Cydu 十 上 Cw dB, Cw), 





(9. 26) 
基 中 第 一 个 积分 理解 为 对 任意 辕 定 的 w， 对 时 间 和 参数 作 普 通 函数 
的 积分 ;第 二 个 积分 理解 为 lto 随机 积分 . (9. 26) 也 常 写 为 
[dt = bt de + ou, EdB,, 
lk 一 foo) 
上 壕 方程 的 存在 唯 - 性 的 研究 是 随机 微分 方程 的 理论 研究 的 一 个 
基本 问题 , 它 不 仅 起 随 机 分 析 的 理论 基础 ,而 日 对 -于 许多 应 几 问 题 
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(9. 27) 





出 有 重 间 音义. 例如 ,在 物理 问题 中 归纳 出 了 Langevin 方程 ,从 其 
存在 唯 -: 性 ,就 可 断定 它 正 是 如 工段 中 例 9. 1 给 出 的 那个 Gauss 
蕊 氏 过 程 , 从 而 我 们 就 知道 它 有 许多 重要 的 性 质 . 

下 睾 我 们 纹 出 随机 微分 方程 的 一 个 比较 简略 的 存在 唯一 性 定 
理 . 

定理 9.2 旭 果 cp 满足 :了 3C 使 

IE | 十 | 一 下 人 人 一 ww 
那么 方程 (9- 18) 存 在 唯 - 解 吉 , 它 是 下 面 迁 找 过 程 的 极限 : 

[ 扣 ”全 六， 


1 
™ 


[&" 全 吝 十 [as.é ds 十 ecoser yd B.、 
£ 次 (py} limé" : 
由 此 可 以 看 出 说 只 依 束 于 及 Brown 运动 五 的 过 去 时 间 的 值 . 
注 ; 定理 9.2 的 条 件 可 以 用 来 作 数 值 撞 所 或 数 全 解 . 到 若 口 甘心 解 的 
评 和 站 有 叭 … 了 些 , 则 定理 菜 件 可 减 台 . 
利用 存 禁 唯一 性 定理 ,就 串 以 知道 满足 随机 微分 万 段 (9. 231 就 - : 定 有 是 如 
9 给 出 的 Gauss 蕊 氏 计 和 禄 ， 


"S$ 9.3 ”应 用 于 滤波 与 调制 信和 号 的 解 调 


1- 调制 信号 与 量 测 方程 


同 忆 第 八 章 中 的 定义 ; 随机 过 程 和 半空 外 称 为 宽 平 稳 的 ,如 
果 上 5 一 m( 党 数 ) 日 ECE 一 mm) (一 mm) 上 只 依赖 E 一 不 记 成 RE 一 5)， 
称 为 &. 的 协 方差 现 数 )， 

宽 乎 稳 这 程 不 妨 假 定 Eb. 王 0, 此 时 协 广 差 浮 数 就 是 相关 十 
数 . 

类 似 村 宽 平 稳 交 的 AR(p) 模 型 . 对 于 宽 平 稳 过 程 也 有 *AR 
(Pp)" 模 型 ,此 时 差分 态 程 应 代 之 以 形式 微分 方程 ， 
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”十 二 

其 中 ” 居 吉 关于 7 的 * 阶 导数 .注意 到 本 党 平稳 列 时 , 契 方 是 
分 ,而 丰 太 是 j,i,d, 序列 ,也 就 是 "i.j.d. 疗 刘 的 部 分 和 ”的 增 可 (其 
分 ). 现 在 1 连续 室 化 . 左 出 变 战 各 阶 微 商 ,右边 的 "Li d. 列 的 部 分 
和 谨 访 灾 成 Brown 运动 {Bwf 衬 0} (如 第 一 章 ), 于 民有 边 的 WW, 
喧 滚 是 Brown 运动 上 对 的 微 位. 但 是 Brown 返 动 的 轨 请 是 相 
处 连续 处 处 不 可 逢 的 5 这 个 末 实 的 证 明 索 要 测度 论 的 知识 ,我 们 不 
在 本 书 中 列 入 ), 微 商 没 有 意义 ,因此 上 述 的 形式 微分 方程 序 理解 
为 积分 方程 .就 是 说 .下 述 lto 上 方程， 





de oo Ca dt + sdB,. 
戎 
Go Gh! [i oe at lds dd onB,. 
， ) 了 1 } 
右 端 积 分 中 6 如 关于 1 的 次 微 商 :E500) 一 下 et 


1200 一 让 ,得 注意 Ce) 并 不 十 fo) 在 通常 意义 下 的 
短 商 , 具 能 按 上 上 式 意 义理 解 . 

同 宽 平 稳 列 英 似 地 .我 们 可 以 想象 ,连续 时 间 的 AR (站 ) 模 型 
在 宽 平 稳 过 程 理论 中 也 称 为 户 步 马 狼 模 志 ， 它 也 可 以 用 来 近似 相 
当 宽 的 类 宽 平 个 过 程 . 特别 ARCp) 模 型 还 可 以 看 成 p 维 的 
六 及 CL) 模型 ， 





为 此 我 们 今 
b 
= | | 
lee 5 
则 
| | 
-、 . | . :| 
dd 7, 二 * * | ， 
7 | 0 ] | 7d | | 0 | 42 
-一 局 a - el | 1 


区 





所 以 在 本 节 中 .我们 不 妨 假定 信号 为 AR(1 ?模型 ,也 可 以 是 
向 世 型 信和 号, 这 里 为 叔 述 简单 .我们 这 里 还 假定 信 叶 为 一 维 的 
d —— kdt + oodl,, (9. 28) 
即 一 - | gbas 十 及 
在 信和 如 发 送 时 ,为 了 使 通路 增加 容 景 与 抗 下 扰 等 的 主要 .需要 
进行 调制 ;所 请 油 珊 就 是 实际 发 送 的 不 蚌 名 .而 是 它 的 一 类 变换 
#5eof). 明和 常见 的 调制 有 以 下 二 种 ， 
调 刺 产 式 :调幅 调 相 调频 
gE Fst sin + HE sin| wor + [sa 


这 里 的 mm 称 为 载波 频率 (出 频率 ?. 政 到 的 信号 还 混和 渤 了 虐 志 ,所 
以 其 测 方 程 应 为 














dn 一 gE td + YdB,'Y, 
其 中 和} 是 一 个 与 1B,} 相 互 独立 的 Brown 运动 , 十 是 在 调频 的 
情形 的 信号 方程 (状态 方程 ) (参见 第 八 童 ) 应 改写 为 : 


内 i ' go 
a | la 中 
nl 1 ola) 0 








dB 





而 量 测 方程 为 
dy 一 sinlent 十 arddt 十 dB Dn, 

更 一 般 地 ,在 通信 系统 中 常 出 现 的 模型 可 以 写成 

je, 一 AEdr 十 Pd5o (状态 方程 ) 
ldz = 8 dr + YodB.,0 ( 量 测 上 方程). 
其 中 所 :人 D 分 别 为 第 阵 和 向 量 ,BB 为 相互 独立 的 Brown 运 
动 ((7. ,8(，，. 316) 也 可 以 是 向 量 }. 这 是 连续 时 间 参 数 的 滤波 
问题 ,由 于 gtr,t} 是 非 线性 的 ,所 以 这 个 模型 远 比 Kalman-Bucy 
模 理 (网 第 八 党 ) 广 . 非 线性 方程 (9. 28) 的 解 ,很 难 有 显 式 表示 . 另 
-方面 ,也 只 能 对 几 个 特殊 的 情形 给 出 非常 粗 的 近似 解 法 ,所 以 
(9. 28) 的 模型 实际 应 用 起 来 仍 能 力 有 限 ， 
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9, 28) 





“2. 最 优 估 计 ( 非 线性 滤波 ) 

发 方 信号 上 5 经 调制 后 ,经 过 言 号 通道 ,再 如 上 不 可 避免 的 内 
虞 到 达 收 方 . 收 方 收 到 的 是 其 测 信 和 号 未, 同 题 是 如 和 何 尽 可 能 好 地 由 
{3) 去 恢复 人 1 也 就 是 已 知 量 测 过 程 在 10, 观测 到 的 样本 17.:0 
sssfi 要 用 它们 的 其 个 蚌 数 来 估计 疙 - 

假定 在 {3,0 和 :所 t} 已 知 的 条 件 下 ,& 的 条 件 密度 记 沪 

plirrt|yi0 I). 
白 然 5 的 全 i 禾 ,应 取 为 们 ,0 过 过 让 已 知 条 件 下 必 的 条 件 期 望 ， 
上 一 jecszlza dx. 
这 种 取 法 非常 直观 ,并 且 在 数学 上 可 以 证 明 是 询 方 意义 下 最 佳 的 
( 见 命 题 8. 2), 即 均 方 误差 最 小 的 估计 . 问题 在 于 怎样 求 出 上 式 中 
的 条 件 概率 密度 . 

Kushner 对 于 非常 一 般 的 信号 过 程 (状态 方程 ) 得 到 了 上 面 的 

条 件 密度 p 满足 的 方程 , 邑 对 于 状态 方程 
dé = p(t Ydt + ot dB 





及 量 测 方程 
dh = gt) 十 HdB,®, 
以 上 定义 的 茶 件 分 布 密 度 p. 一 p(x ,0<st) 应 该 满足 


i For)py abbr}yp) 
dp | 一 对 | 








dt 十 (和 (各 


— gi0)) X Fd BE di), 
其 中 有 人间 是 (人 0 关于 pz 过 过 站 的 期 望 ， 
g(t) 一 Jaczs pl ry,0 dz. 


由 于 在 观测 前 , 量 测 讨 程 ?是 随 机 过 程 , 因 此 上 述 关 于 的 方程 是 
随机 的 偏 微分 方程 ( 它 的 推 导 可 参见 LSch] 等 节 ). 称 为 Kushner 
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方程 . 然而 Rushner 方程 中 尚 有 &, 一般 地 它 依赖 于 ,因而 -一 般 地 
Kushner 方程 并 未 完全 提供 p, 的 算法 ,但 在 下 一 段 的 线性 情形 ,g 


是 常数 ,从 而 & 就 不 依 町 训 了 了. 
对 于 光滑 函数 /由 Kushnaer 方程 可 得 到 对 于 8 的 最 佳 估 


计 六 (). 又 

F086) = [fp lp,0 stdz, 
这 满足 方程 
df &)= pdr 


-=| 加 gf 十 Co)| | 


tL GD FONEE JX Et), 
{9, 29) 
对 于 ad{ 一 般 d > 1) 维 的 5 的 情形 , 设 状态 方程 为 
d €, = bed + od BD 
《c 为 惩 阵 , Bm ,5 均 为 向量 ). 又 设 量 测 过 程 也 是 多 维 的 , 即 
dpm gE) 4 Td B® 
(8 为 向 量 值 函数 ,总 ?为 向 量 ,六 为 矩阵 ), 那 么 对 多 维 的 光滑 函 
数 f(z), 信 计 /CE) 应 满足 随机 微分 方程， 
df ED Pd HH LOE Ea) 一 六 50E 


x TT dD — gE, de. 《9. 30) 
此 处 





LCr) 一 3 Dota)acry 7 


肥 了 二 zx, 如 
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| 


Cu): 
T(E,) 
记 它 的 平方 误差 阵 为 
DD A COE CT (9. 31) 
特 它 的 最 佳 估 计 记 为 
各 PC) (9. 32) 


于 是 也 可 以 得 出 V, 谐 足 的 随机 微分 方程 . 
3. 线性 情形 (连续 时 间 参 数 的 Kalman-Buey 滤波 ) 
这 时 我 们 有 

rd t, = A, Ed 十 Dd BY 【状态 方程 )， 

Ltd7 > 人 5dr 十 dB, (其 测 方程 )， 
Bm,B,*; 为 相互 独立 的 多 维 Brown 运动 ,4,,P ,af ,PP 为 非 随机 
的 矩阵 . 

记 吕 一 忆 忆 7 ,由 前 面 的 讨论 可 以 得 出 误差 阵 的 最 佳 佑 计 V， 


满足 Riceatti 方程 (由 十 推导 较 长 ,本 书 将 其 略 去 ,读者 可 参考 
[LSeh 1) 


(9. 33) 


dV, 
dr 一 AV, 十 VA 十 DD 的 Ta NY, [和 34) 


而 ,的 方程 则 化 为 
de = A dt + VMTRAIdD -MEdD), (9.35) 
(9. 35) 你 为 Kalman-Bucy 滤波 器 ,K, 和 VM,TR，! 称 为 Kalman 增 
盖 , 要 算出 它 必须 先 解 Riceatti 方程 (9. 34). 
注 1: 这 里 线性 滤波 器 的 形式 与 离散 情形 ( 见 第 从 党) 很 相似 , 其 实 这 
绎 抱 非 是 用 Y, 代 畦 了 那里 的 2,,Rieeatti 方程 代 作 了 基 分 式 , 然而 两 阁 也 有 
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不 同 之 处 :在 离散 精 形 
P= Ea -Fa 
是 沪 波 的 2 的 理论 误差 方 头 阵 ,而 在 这 里 VW, 是 方差 阵 ， 
CE ENE EY 
的 最 侍 估 计 { 它 是 告 计 误 差 的 估计 ). 
注 2: 委 -个 推导 Kalman-bucy 站 波 器 的 方法 是 用 新 乱 过 程 (参见 
FOk]) ,滤波 误差 阵 则 仍 用 ,的 理论 误差 方差 阵 
S, = E(t, -EVE -EY7, 
它 也 满足 Riccatti 方程 . 增 访 KK 各 SM RT 注意 5S,=ED(E) 耐久 一 
的 害处 辐 和 , 入 是 它 位 必 同 “个 eennd 条 以 人 
二 Vs 它们 的 解 也 有 S= 忆 ,其 丽 得 到 的 估计 志 就 是 - 样 的 . 这 说 明 在 线 
从 情形 用 5 用 天 和 
和 
可 取 ¢ ,二 0,5， 一 VW,= 人 0. 
注 3; 又 如 果 Riccatti 方程 的 解 有 一 个 极 眼 VA limV), 风 可 以 取 
5 一 Ve 一 V 此 时 5 一 VV, 一 Ve 与 (无关 ,在 轴 ,D.,M,.T 等 均 为 不 依 


赖 上 的 常 矩阵 时 , 常 可 能 出 现 此 种 情形 ,此 时 Y 是 代数 方程 
AV 十 47 二 TDDT — VMR-IMY -0 

















的 非 负 和 矩阵 解 . 
注 4; -纵情 形 ， 由 A MT 等 都 基数 信 阔 数 时 , 则 滤波 化 为 


(sa, -全 
MY 
瑟 ， 





¢ ,de 4 


jt dm. 


as ~ {a 
上 述 方程 可 以 用 下 述 选 代 方 程 
de ml ly mY 


= + 2AV, — EY + ds, 


tm EA 
5 fa pe pe 


作 近 侯 计 算 . 特别 在 - 维 虹 4,,D,, Mr 等 不 依 整 z 时 ,VY” 忆 灿 时 存 在 ) 是 一 
348 











次 谨 程 


dt 1 
2AY - +B = 


的 正解 . 
4. 调制 信号 的 滤波 与 解 调 

在 调制 信 污 中 ,事实 上 常常 隐 仿 着 制 前 的 原 信号 的 频率 大 
大 低 于 调制 频率 %, 所 以 在 解 调 器 内 常设 有 低 通 滤波 器 ,使 高 频 
项 不 能 通过 . 在 设计 楼 收 信 号 的 近似 最 佳 滤波 器 的 时 候 , 常 忽略 高 
频 项 . 低 通 泪 波 器 有 标准 的 设计 与 产品 (硬件 或 软件 ,在 本 书 中 不 
再 氢 述 . 

1” 经 过 低 通 的 调 辐 传输 信号 的 Kaliman-Bucy 滤波 器 . 

设 信 号 方程 为 : 

dé =— kdi + HdB', 
而 量 测 方程 是 调幅 信号 加 上 通路 噪声 ; 
dy 一 总 Sinantdr 十 YdBi CB，BG3! 独立 )， 

这 是 一 个 线性 系统 . 由 第 3 段 (9. 34) ,误差 方差 阵 应 满足 


Vm ohV, 一 2 Sin Se + Bb, 


旦 R= 7 M,= sinwt,A, ——~k. 
注意 到 


sin?wof 一 pe 一 tos2wnt) ， 


ee 于 是 


Vi se 一 9kV, — av? 十 本 
具体 解 出 这 个 常 微分 方程 ,可 以 看 到 这 个 渐 近 方程 的 近似 稳 态 方 
程 为 


四 2gV, -aY + 二 0， 
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其 解 为 


Te 一 (44 十 2860) 二 一 2 
取 呈 =Ve 则 WeVr 由 (9. 35) 就 得 到 5, 的 近似 方程 
_ Ve Ve 
ds, 一 一 Ged + -a Sinentdy | 十 如 Sn wt. 








(9. 36) 
同样 的 理由 ,在 sin*wot 中 由 低 通 滤波 器 滤 去 高 频 项 后 只 留 下 了 
方 ' 于 是 最 后 得 Kalman-Rucy 滤波 器 近似 地 由 下 面 的 方程 描述 ， 


Em 


dt ， 一 | 十 3 ]5ad: 十 sined’. 
从 而 有 强 式 解 

Gb +t he snddy. 

2” 经 过 低 遂 滤波 器 的 调 入 传输 信和 号 Kalman-Bucy 滤波 器 的 
粗 近 似 为 : 

信和 号 方程 仍 为 





， dt = — Etdt + bdBi’, 
但 是 量 测 方程 是 调 相 信和 导 加 上 通路 噪声 , 即 ; 
dn 二 sin Crwt 十 BE,) 十 rd B® CB ,BB 独立 Y. 
这 时 量 测 方 程 是 非 线 性 的 ,我 们 要 给 出 滤波 方程 (9. 35) 及 舍 
计 方 差 V, 满足 的 方程 (9. 34) 的 线性 粗 近 似 . 这 里 所 谓 钥 近 似 是 
指 ,推导 近似 方程 时 需要 假定 上 一 很 小 ,但 是 在 实际 应 用 中 并 
不 能 保证 总 一 志 很 小 ,所 以 这 种 近似 方程 是 非常 往 的 . 以 下 我 们 只 
列 出 其 模 概 ,而 略 去 一 切 直 观 推导 . 
把 (9. 29) 的 右 端 按 & 一 上 作 Tayior 展开 只 留 下 低 阶 项 ; 并 考 
虑 到 总 一 上 ,的 估计 人 为 0, 在 用 V 代 蔡 Er 后 就 得 到 以 下 的 粗 近 
似 方程 
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d$ 一 一 dt 十 法要 DV 一 有 人 90 
对 于 估计 方差 V 的 方程 , 作 同 样 的 粗 近 似 后 也 得 到 粗 近 似 方 各 
dV = (6 一 2kV dr 十 VS FE, VAdn — gistydt). 
利用 gr) 二 sinCwnt 十 Br) 代入 得 
dV ,= (6: — 2kV ,dr 十 此 了 [一 Simtgent 十 Be)sin tet + Be, ) 
十 sini(wot 十 Bt， dr 一 Ysin(wot 十 BE, ydB‘ |]， 
再 注意 
sin Cot 十 Bt sinfent + PL) 
— 3 [cos (ot + BG | £1.)) + cospE, —&)] 


sin? Cewrt 十 BE,) 二 a 一 COst2iwof 十 2685.))、 


由 低 通 庄 波 器 滤 尖 高 频 部 分 ( 含 2wot 十 * 的 部 分 ), 并 利用 < 之 
小 时 cosP(&, 一 上) 和 ~1”, 再 假定 Y<1, 于 是 V, 的 最 后 粗 近似 方程 为 
dV 2kV,. 此 方程 有 稳定 解 V, 一 站 | 取 V 一 冯 , 则 


而 2 
一 中 上 


对 了 于，， 再 注意 到 
Ey, ,= BeosCwt + PE sin(wt + fe,) 





一 Fsin a 十 285， 了 


高 频 项 ,通过 低 通 滤波 器 后 得 到 0, 于 是 的 粗 近 似 方程 化 为 
县 后 的 到 
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总 


8 Cos (ewot 十 BY, ydn.. 





dt, -一 kd 


2kY2 
3" 调 相传 输 信号 的 粗 近 似 小 波 器 的 获得 比较 复杂 ,有 兴趣 的 
读者 可 参见 ， 
Snyder ,DD. 1，The state-variabje approach to continuous es- 


timation withapplication to analog communication Theory, MIT 


Press. Cambridge .Mass, 1969, 


89.4 证 券 投 资 模型 与 随机 控制 


1. 问题 的 提出 


我 们 先 举 -- 例 . 

便 % 7 证 券 的 最 佳 投 资方 案 ) 

有 价 证 券 可 以 分 为 两 种 . 一 种 是 不 担 风险 的 ,如 银行 存款 ,短期 
国债 等 . 另 - -种 是 有 风险 的 (但 可 能 收益 高 的 ) ,如 股票 等 . 今 菜 人 有 资 
本 z 元 ,在 不 考虑 人 展 贷 的 情形 下 , 问 在 每 个 时 刻 下 连续 时 间 ) 以 什么 
比例 购买 这 两 种 和 证券, 可 使 得 他 在 时 间 工 的 时 候 获 益 最 多 ? 

在 时 刻 1 二 0 时 的 资金 zx, 把 它 用 于 购买 这 两 种 证 券 . 为 简单 
起 见 ,我 们 不 计 卖 出 买 进 所 需 的 时 间 . 交 易 费 与 税金 设 在 任意 + 
二 了 ,他 分 别 太 w 与 1 一 uw 的 比例 (0<&w 志 1) 买 进 有 风险 与 元 风险 
证 券 . 这 祥 使 他 在 :时 刻 的 总 财富 为 (8, 一 zx). 设 无 风险 证 券 的 利 
率 为 r(>0)， 有 风险 证 券 的 利率 为 5 之) 它 还 具有 随机 波动 风 
险 . 假 定 这 种 随机 波动 风险 可 以 用 Brown 运动 来 表达 ， 十 是 我 们 
可 以 采用 下 述 随 机 微分 方程 的 模型 来 错 述 &( 风 险 证 养 就 是 89.2 
节 的 Black-Scholes 模 开 )， 

GE = tsbds 十 edB)+4 (一 uerds (rs ~ 0), 
fe (0 & 4 1), 
其 中 ,b,c 都 是 非 负 常数 ,pyr， {Bt 衬 0} 是 Brown 运动 . 
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我 们 的 目的 基 想 “调整 ”2,, 使 它 在 其 个 国定 时 刻 了 有 最 大 的 
平均 财富 , 即 Re 一 最 大 (更 : 般 地 ,对 某 个 日 标 畏 数 er) ,能 名 
使 Fep(6 一 最大) 

注意 到 a 可 以 理解 为 一 种 “风险 随机 波动 率 ”, 当 B, 取 绝对 值 
很 大 的 负担 时 ,此 人 训 要 大 损失 ,这 里 就 是 一 个 随机 过 程 , 如 毕 扬 
首 达 器 的 随机 时 刻 为 m, 那 么 购买 过 程 到 mm 必须 终止 ,因为 此 时 
他 已 经 把 财富 耗 尽 了 . 所 以 我 们 的 目标 应 修改 为 :要 选取 ww 使 
srnr 最 大 - 

对 于 zx， 除了 取 什 在 [0,14 内 的 限制 以 外 , 它 应 依赖 于 随机 过 
程 信 :zt 这 0 4, 而 用 只 依赖 于 的 过 去 的 值 (也 就 是 不 依 燥 于 的 
将 来 的 值 }. 

这 类 问题 与 $4.5 的 随机 决策 类 似 , 不 同 之 处 在 于 这 里 研究 
的 六 属于 连续 时 间 连 续 状 态 的 情况 . 这 时 我 们 有 -个 由 随机 微分 
方程 决定 的 随机 系统 ,其 中 包含 一 个 可 控制 的 因素 x&. 


2. 随机 控制 的 模型 


为 了 能 研究 多 维 的 情形 ,我们 要 简要 地 孝 述 关于 多 维 Brown 
运动 的 te 随机 积分 的 定义 , 设 15,:z 六 0} 是 - .个 内 维 Brown 运 
动 , 即 它 是 关 个 相互 独立 的 Brown 运动 {8" ,i 过 mr) 组 成 的 列 向 
量 . 对 于 d X 普 矩阵 信 随 礼 画 数 {( 旬 ,Gao)) si 之 0 只 要 满足 ， 

(1) 多 ,Cu) 只 依赖 台 过 去 的 值 ; 


(2) [EI®, (0) [dt < o0, 
那么 我 们 定义 
Le 
| Bt ,m0 dB 
5 rr 
| aaa 人 
Soa 
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坝 在 我 们 考虑 d 维 随 机 微分 方程 ,其 中 带 有 - “个头 维 果 控 制 
肉 素 到 . 
ja = (有 -~ pté adds (1), 
lg 一 
疆 中 马 尼 4 维 随机 过 程 ,w 是 只 依赖 二 的 过 去 的 值 的 点 维 随机 过 
程 , 片 是 由 维 JHrown 运动 ,gy 分别 为 Xmadx1 和 窒 阵 值 卫 数 . 
代表 控制 策略 或 控制 方案 ，- 艇 进 # 是 - -个 随机 过 程 , 它 决定 在 每 
个 时 肇 上 再 来 控制 二 的 控制 量 5 系统 在 7? 以 前 的 情况 来 湛 
定 , 因 此 不 能 依赖 二 二 的 将 来 .{ 重 晨 只 依 的 这 去 的 值 的 随机 过 
程 ,也 就 是 只 依 整 总 与 户 的 的 信 的 时 各 一 旦 ww 依赖 于 在 的 
方式 选 定 ( 即 给 定 了 - -个 控制 方案 或 控制 策略 后 ) ,上述 方程 的 解 
过 程 二 是 依赖 于 * 的 , 故 也 党 记 为 名 ,控制 的 目的 是 要 选取 合适 的 
x， 慎 得 某 个 与 有关 的 量 达 到 最 优 ,例如 说 使 某 种 代价 达 最 小 ,或 
使 某 种 报 旺 过 最 人. 
为 了 数学 上 的 要 求 , 倒 如 说 使 方程 (9. 36) 存 在 唯一 的 解 5, 我 
们 假定 bz) 与 rzCzro 十 分 好 ,例如 它们 部 满足 Lipschitz 条 件 ， 
其 公有 一 乍 的 可 微 性 . 我 们 把 这 办 -的 解 记 为 名 …( 其 中 上 标 表 示 
初 值 所 一 ,此 外 它 也 依赖 . 在 不 引起 记号 洪 淆 下 ,我 们 略 去 了 这 
个 解 关于 依赖 性 的 足 标 ). 
假定 在 时 刻 * 系统 处 于 状态 x, 且 控制 策 栈 的 值 为 5 时 ,单位 
时 间 的 运行 代价 为 F(s ,7,v) ,而 在 时 刻 :停止 有 系统 处 于 状态 地 
时 的 停止 操作 代价 为 p(s ,zx) ,于 是 随机 系统 "站 控制 策略 (过 
程 )im,:1ssSr} 下 的 平均 代价 为 
J ra) = E| | Fu dds + Prk | (9. 37) 
这 里 的 = 通常 是 羡 吉 出 某 个 区 域 的 时 间 , 它 是 一 个 停 时 , 即 对 任 宣 
! 之 0.171} 总 是 过 程 8 在 z 以 前 发 生 的 -- 件 溃 ， 
i 忆 全 体 可 能 采取 的 控制 策略 集合 为 ,而 记 
Cy 人 金 ta(1,$,); 任意 二 元 孙 数 (fx)!， 


《9. 36) 
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[全 人 人): 任意 一 元 函数 站 1 
显 包 ECEvCrt 中 的 控制 策略 叫做 马 氏 控制 策略 . 因为 在 时 
刻 ; 的 策 上 蜡 ,由 扫 玉 于 系统 在 时 诸 7 的 状况 襄 . 而 与 系统 在 肝 刘 f 
以 症 的 状 沉 无关: 中 的 控制 策略 称 为 平稳 马 氏 控制 策略 . 因为 
这 种 策 赠 且 依 下 于 系统 状况 ,不随 时间 改变 这 种 护 贺 关系 . 非 随机 
的 控制 策略 浆 为 决定 性 的 控制 或 开 环 控制 . 随机 的 控制 策略 称 为 
闭环 控制 或 反馈 控制 |. | 
最 传 近 制 的 基本 和 同 题 眉 ， 
1” 如何 求 站 Cr) 会 iafY iwew) (最 佳 代 价 )? 
2” 是 砷 存在 ( 慰 否 叭 一)u' EU ,使 

了 一 inf 7 eatga ”和 称 为 最 佳 控制 策略 )? 
3” 有 有 上述” 和 存在, 则 如 何 找 出 它 ? 
4” 在 起 不 站 在 , 则 如 何 求 es- 最 佳 榨 制 策略 w', 使 
du inf J x) 十 E? 

8 什么 时 候 有 有 


1 一 in 
ne 


ET 
印 什么 时 候 人 在 在 最 佳 策略 是 马 氏 控制 策略 ?如 果 它 存在 ， 则 又 如 何 
去 找到 它 ? 
注 1: 如果 在 控制 的 过 程 中 不 能 量 测 到 的 值 ,向 内 能 酸 测 划 如 下 的 
过 程 Ps 








dp. 一 hls ds 十 YC, dB 

此 中 再 是 与 如 相互 独立 的 Brown 运动 ,那么 容许 的 控制 策略 4 不 应 依赖 的 
2 “过 去 值 ,而 应 依赖 ?的 过 去 值 , 这 时 我 们 遇 到 的 就 不 理 足 个 昔 纯 的 控制 
问题 , 南 足 带 有 滤波 的 控制 问题 . 

在 非常 特殊 的 情形 ,例如 a 只 依赖 于 x (好 efroa 一 afr) 的 情形 ), 晶 a 
了 也 都 是 线性 函数 ,而 P, 才 是 二 次 函数 的 情形, 人们 早 就 证 明了 滤波 与 入 
制 可 以 分 开 地 去 做, 也 就 是 在 带 有 量 测 方程 的 控制 问题 中 , 先 假定 没有 控制 
( 置 x 一 0) 水 得 过 程 # 的 省 波 过 程 E; 些 俱 定 可 下 误差 地 量 测 ( 妈 没有 附加 
的 繁 润 方 程 的 情形 )， 由 此 求 得 最 使 控制 策略 ;到 后 在 求 得 的 最 作 挫 制 策略 
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小 用 代办 二 这 样 就 得 到 了 带 有 量 测 的 最 佳 控制 . 这 种 分 于 的 做 法 丈 为 分 离 
性 原则 . 饥 休 由 分 离 性 原则 得 到 的 控制 策略 确 是 起 佳 控制 策略 . 则 称 分 离 性 
原则 成 立 . 
注 23: 非 时 齐 { 即 系数 显 售 < 的 情 彤 ) 状 态 方 程 情 展 
砷 时 齐 情 毕 的 受 控 制 状态 片 程 席 为 
| = os dB, FF plsot nu Ids (Cr), 
ls —, 
这 时 , 岂 要 我 们 把 状态 变量 上 改 成 新 的 状态 变 基 二 外 (2 (4 十 1 维 ) ,就 可 
以 得 到 -个 美 二 志 的 时 齐 的 ( 基 系 数 不 显 会 35) 状态 控制 方程 ,为 此 我 们 记 
DE) 全 
天 是 就 有 


b (én) 
+ En Es 
1 





(9, 38) 


这 就 变 成 了 时 齐 的 模型 . 
“3. 三 个 典型 的 最 佳 控制 的 定理 


1) 单位 时 间 运 行 代价 为 时 齐 情形 时 越 出 某 区 域 万 前 的 最 佳 
控制 ， 
这 时 停止 时 刻 = 取 为 在 时 刻 上 以 后 露出 户 的 时 刻 ， 
+ 会 inffs 六 相生 车厂 }， 
设 :一 0, 并 设 价格 函数 为 


Ter) = E{ [Fdds + ge€)), 


其 中 已 ,yp 为 有 界 连续 函数 . 假定 D 为 边界 光滑 的 (说 如 Cs 边界 ， 
册 边 界 上 上 每 -一 点 附近 的 边界 都 可 以 用 二 次 可 微 丽 数 表达 的 情形 》 
有 界 区 域 ,而 


天 , 记 , 二 pv {9. 39) 





(是 梯度 算 子 .一 (ac 
定理 94 在 上 述 条 件 于 ,我们 有 : 
假定 在 马 氏 控制 策略 中 存在 不 显 仿 t 的 最 佳 的 马 氏 控制 策略 
x# "(行人 在 某 个 函数 让 使 = C8.)), 即 它 满足 
7 和 他 inf ddr) Oo dr ), 9. 40) 


再 假定 V(xz) 一 次 连续 可 微 , 旭 x 也 是 最 住 控制 策略 (从 而 V(x) 
为 最 低 价 格 函 数 ). 而 且 VCx) 满 足下 述 椭 辐 型 HIB ( Hatailton- 
jacobi-Bellman}; 极 值 微分 方程 的 如 下 边 值 问题 ; 

| ii (FOR 十 (DOrt) 一 0，7 和 万 ， 





一 名 
反之 ,如 果 存 在 谋 九 的 闭 包 万 上 连续 且 在 厂 二 次 连续 可 微 的 有 界 
函数 三 满足 
[F(x (LEWC 一 0 (WE 站 
Wl|n = ¥, 


那么 多 二 inf (ow). 如果 进 一 步 还 不 在 上 函数 /满足 
FfrD + LW = 0 (Vr ED). (9.41) 

那么 A(§) 是 最 佳 榨 制 策 略 ,而 多 (Cr)? 就 是 最 低 价格 函数 . 

注 : 这 个 定理 同时 也 给 出 了 不 灵 含 :的 最 佳 马 氏 控制 策略 w 是 最 停 控 
市 策略 的 充分 条 件 , 即 

dr 人 

2) 单位 时 间 运 行 代价 (假定 依赖 时 间 ) 在 定 长 时 间 间 隔 中 的 
最 佳 控 制 : 

对 于 国定 时 刻 #1, 记 


JAH 一 E[ FG, udds 十 $7) |， 
要 求 出 
V(t,x) 一 Inf dT ), 
HE oy 


定理 9B 在 与 定理 9A 相似 的 条 件 下 ， 为 求 最 佳 控制 策略 
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a 由 需 求解 抛物 性 日 7B 方程 终 值 问 题 : 
1 AV . 
| inf | FeT) 十 37 二 tir) | = 0， 


总 
(Ver) = pt) 
的 解 让 Ge), 以 及 寻找 A). 使 
ey rr EY) Vt or), 
这 时 "一 f(t 
3) 浪人 台 情形 : 
设 二 是 三 在 时 刻 了 以 后 越 出 天 的 时 刻 , 疡 满足 1) 中 条 件 , 阿 
定时 刻 4z. 丸 设 


gt) 一 A 十 Soe 7) |， 
Li 


下》 一 inf/ (er fe) 
对 这 个 模型 ,我们 有 
定理 9C 在 与 定理 9A 相似 的 条 御 下 ,为 求 最 佳 控制 策略 

a 只 需求 解 扫 物性 HJB 方 竹 的 终 值 边 值 问题 ， 

DV 

j 5 ， 

Va) = zzz) Gn) 
的 解 了 Ce,z)，, 以 及 寻找 ftr) ,使 

ET 一 

这 时 5 一 并 乱 风 :Bernt Oksendal, Stochaastic Differential 
Eguations，2nd cdition, 19897. 





inf {FO Tv + CLVY) ~ 0. 
人 


4. 线性 调整 器 
设 
45， 一 (48 Eud)ds + odBy) {ts 1), 
Te = (9, 42) 


dfn) oF | EC&. 十 下 站 ads 4 $7 Dé, | (9. 4143) 


358 





其 中 .是 不 依 翰 于 4 的 非 随 机 函数 ,x 为 4d 维 实 向 进 , ni 为 下 维 宰 
向 量 , 系 数 均 为 非 随 机 的 时 间 国 数 ,4..C.. 更 :cd Xx dF:d Xk,D.; 
开 YX 及 更 为 非 负 定 . 六 为 正定 . 

起 时 的 HJB 方程 为 
I + A inf Co Dv En» gradV ) 





mE Mt 
£ = 
， 3 FV (9. 44) 
一 radV 十 也 > 名 F790 ™ 全。 


VOU) = ri Bx, 
其 中 ta) 全 (co 
我 们 用 待定 系数 法 来 试探 下 述 形式 的 解 的 可 能 性 ; 
tf) 二 Sr oa. 
其 中 5S, 非 负 定 ,, 与 & 部 是 非 随 机 的 时 间 苹 数 . 
由 "终端 和 某 件 Cr 一 二 7 中 显 见 ,我 们 有 :5, 一 多 ， & 一 小 
特 上 而 VG.) 的 特 琶 形式 代入 抛物 型 HB 方程 (8. 44) 中 家 
上 到 最 小 的 部 分 ,得 到 
vu De TS + STr) 
wt DE SA Dt 十 站 -ES ce) 
— (CESTD, E'S, x). 
可 见 , 取 
vO DE'Sr, 
(9. 44) 左 方 就 达到 最 小 , 把 它 与 了 erz) 一 Sr 上 aw 代入 抛物 型 
HIB 方程 (9. 44) 就 变 为 
$= — 2A,'5, + SED, E'S — CO,, 
人 = {roo Sd,) (fi). 
我 们 在 终端 条 件 5, 一 下 先 解 (9. 45) 中 第 一 个 方程 ( 它 是 5 
的 Riccatti 方程 ), 便 得 到 5,. 再 解 第 二 个 方程 并 由 此 用 定理 9B 全 
可 得 介 最 低 价 格 为 


《9. 45) 





VRE) = iro) Sd 《7 <) 


而 最 佳 控制 策略 头 应 是 
a OD, E'Sé, 
它 基 一 个 雪线 控制 策略 . 
注 1: 如 开 才 不 能 自 接 最 渭 , 而 景 济 呈 是 由 王 述 方程 确定 的 7: 
1dn. = HHéds + Ld B,. 
(ty 一 fo 
巧 中 站 是 与 总 独 之 的 Brown 运动 , 瑟 , 基 非 随机 的 时 间 明 数 ,那么 从 线性 
控制 的 -- 般 理论 中 知道 分离 原 罗 * 昆 成 闻 的 ( 在 本 节 中 我 们 不 理 详 述 “分 离 
原则 ?人 线性 扩 再 中 成 立 的 理 册 ) ,所 以 我 们 可 以 先 在 状态 的 控制 方程 中 令 


(9. 46) 


二 0, 妊 由 入 浏 方程 的 量 测量 7 得 到 的 瀑 流 住 (Ksljman Buey 滤波 16, ,再 由 
上 而 方法 求 得 无 最 测 情形 时 (4, 三 1,T, = 上) 的 最 佳 控制 策略 一 
站 本 05 最 后 把 二 改 类， 便 得 到 最 住 控制 策略 为 
4 = Dk!S,€,. 

这 时 由 于 二 依赖 于 ?的 过 去 的 取 侦 ,从 而 w ”不 于是 马 氏 控制 策略 了 了 ( 这 里 
的 马 民 控制 策略 应 理解 成 fw:w = 六 (任意 函数 有 1 中 的 一 个 元 熹 )， 

注 2: 在 量 测 方程 中 不 区 许 出 现 花 制 量 w 

注 3: 求解 抛物 型 HJ8B 方程 或 精 贺 型 日 jB 方程 也 基 衫 困 准 的 . 地 层 人 
们 从 更 为 实用 的 角度 ,提出 了 壤 制 问题 的 马 氏 链 近 得 方法 (参见 ,Harold j. 


kushner,Paul G, Dupuis, Numerical method for stochastic control problems 





in continuous time, Springer ,1992). 
5. 例 9.1 中 证 养 最 佳 购买 方案 的 确定 


现在 我 们 来 解决 第 一 段 中 提出 的 问题 . 我 们 注意 到 最 大 获 益 
问题 与 最 低 价 格 问 题 之 闻 是 对 称 的 ,因而 在 ?~--4 的 讨论 中 只 要 把 
所 有 的 inf 都 改 为 sup ,我 们 都 得 到 了 最 大 获 益 问题 的 相应 结论 . 

假定 在 例 9. 1 中 的 Pr 一 Oo<e< IC 合理 的 假设 应 为 ge 一 
下 但 是 这 种 情形 不 电 求 解 , 故 只 好 假定 a 二 1), 令 
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WCG = Sp ES Tl, 
这 时 与 3.3) 叭 一 -不同 之 处 在 十 这 里 的 区 城 站 一 4 并 不 有 内 ， 


但 是 事实 上 在 fg=1 的 情形 下 ,定理 59 仍旧 成 了 并. 下 面 我 们 试 解 
定理 9C 中 描 物 型 HJB 方程 的 终 值 廊 值 问题 ， 





DY La 
Sup | yr + FU TO Ty Laer rtl 一 Ee 0， 
Ver) = V0 (tt) (9. 47) 


(C9. 17 3 4 节 过 等 二 


dV | 好 到 | (208 — AV | | IY 
oo ; mr 1 忆 Ar |7: 站 ， 
他 此 下 uD | 2 了 0 x |* 一 LE 人 的 | > Tr 中 
L | | | J 
FY. 

















要 使 方 括号 内 达到 最 大 ,只 有 几 种 可 能 ;第 -种 是 5 > 0. 此 时 
有 :一 0 时 达 最 天. 这样 (49. 47) 变 为 


[Vor = V0 0 0 过 了 
第 二 种 是 可 让 可 负 , 这 种 情形 较为 复杂 . 由 于 我 们 只 带 要 求 
一 个 正解 ,所 以 木 去 讨论 它 . 第 三 种 是 5 < 0, 此 时 方 括号 内 项 
在 
全 
处 取 值 最 大 ,又 由 于 我 们 要 求 0 二 wo 赤 1. 从 起 演 0 及 by 我 们 看 
L he pe sr nV - - 
出 要 使 (9. 477 有 解 就 必须 要 求 了 六 0, 于 是 (9.47) 中 第 - - 式 变 为 


。 DV Vv 
”一 一 但 一 1» fro 5 ( 记 成 Ar er) ) 


EE ca :FV aV 
+ 去 外 i?g Jv x 二 二 0. 由 vw' 的 表达 式 


我 们 推出 59.47) 等 价 于 
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_ - ~ - - 0D， 
Dt a :FV 《9. 47 了 


VY = V0) = 0. 
这 是 一 个 非 线 性 方程 终 边 值 问题 . 我 们 试探 方程 有 下 述 形 式 的 解 
Vr) = hr 
把 它 代入 (9. 47)' .全 得 








Bh a) 
加 
V2) = er Or, 
从 面 
-wr 
fOr) = 2 
一 ra Vr Gefl a) 





由 定理 9 ,这 涪 明 只 要 元 Pl 控制 晤 如 就 满足 0< 志 过 1 
而 是 最 住 马 氏 控 制 就 居 常 们 控制 : 
wu” rl wa) 

此 时 7 满足 以 上 一切 要 求 | 在 0<<x<<n 中 有 <0, 呈 >0]， 
控 刺 景 *” 满足 D<wr 过 1. 这 就是; 若 时 刻 + 有 资金 上 ,在 任意 时 
刻 * > 已 只 要 侯 一 7ezl -ao 之 1, 如 果 用 奖金 的 ,全 -部 
分 购买 有 项 险 证 券 ,和 而 以 其 余部 分 购买 无 风险 证 券 ,那么 在 用 价 信 
函数 wz) = (0 <a < 1) 作 资金 评估 条 件 下 ,在 时 刻 平 均 获 益 
为 ex*, 它 是 最 太 获 益 . 


6. 期 权 定 价 , 夺 期 保值 与 倒 向 随机 微分 方程 


与 控制 概念 密切 相关 的 随机 的 终点 控制 ;假定 5(z,x,w) 充 分 
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好 ,gtzsz:z) 一 v 加 村 将 来 时 刻 工 的 一 个 随机 变量 区, 是 可 和 存在 
(ED) 及 x 站 0. 合 二 二 革 d 二 BE 二 dB,2 
这 种 问题 称 为 倒 向 随机 微分 方 得. 件数 理 金融 中 天 称 为 辣 叶 
到 将 获得 的 林 定 权益 {或 债权 econtingent claim) ,$$ 称 为 和 在 时 刻 
之 7) 的 资产 价值 . FPengj 中 汪 明 了 村 于 到 并: 二: 宫 稍 形 . 目 订 倒 
问 方 程 的 解 (5..%) 唯 一 存在 ,于 是 名 (二 =x, 不 再 随机 }) 就 是 在 :一 0 
肝 刻 购买 (了 时 获 盖 的 3 所 壳 付 的 钱 ( 定 价 )， 
例如 有 “- 则 股 票 .用 Black- Scholes 模型 描述 它 在 时 刻 1 的 价 














格 


ea 


do, = Shdi odB)y Hr 0), 
"为 当前 的 银行 利率 . 没 以 这 种 股票 为 资产 上 市 一 种 欧式 看 涨 期 
权 (european call option) , 即 在 /二 0 时 直方 与 买方 订 了 一个 合约 ， 
规定 闫 方 有 在 时 刻 了 以 价格 为 天 类 进 - - 批 这 种 股票 的 权利 (如 果 
当时 的 市 场 价格 Sz 低 于 天 ,买方 可 以 不 买 ), 因 此 买方 在 工时 净 
得 X 人 (9 -KK}'. 由 于 这 个 合约 能 带 来 多 的 获 益 ,当然 需要 在 / 
二 0 时 用 钱 米 严 , 辣 这 个 合约 应 该 值 多 少 钱 才 合理 呢 ? 设 生 是 部 
在 时刻 所 具有 的 资产 ,金融 上 有 -个 对 冲 风 险 的 原则 , 书 套 期 
Chedge) 原 则 ,就 是 在 1 峙 " 辜 拟 "页 出 份 股 票 (n, 可 以 负 , 此 时 表 
了 示 买 进 ) 使 余下 的 部 分 不 再 有 风险 . 也 就 是 * 卖 出 "了 呈 份 后 ,在 ， 
二 df 时 的 资产 为 名 -一 .Siw41 它 应 该 相当 于 + 时 刻 剩余 资产 吉 一 
2 存 进 利率 为 + 的 银行 中 在 1 十 dz 时 刻 应 得 的 资产 , 即 

Gr 一 So 二 rd 一 
我 们 用 dS ,ds, 分 别 代替 后 一 ,5 一 5,， 上 式 就 变 为 

dé, 一 ndS, 一 r( 有 一 ns di. 

等 用 dS, 一 5S,(od#8, 十 bdr) 代入 ,最 后 得 到 下 述 的 倒 向 随机 微分 方 
程 ( 下 面 记 区 一 23: ,其 中 必 是 末 知 的 ) 

dé = CE 6 — nd 4+ onmdb,. 

< = 及. 
由 于 对 于 满足 EEX’ 之 ‘的 六. 方程 存在 唯 - 解 (6 ,及 )), 合 可 自然 
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地 认为 名 是 意 得 期 权 忆 这 个 合约 合理 的 价格 - 具体 地 如 何 求 这 倒 
问 随 机 微分 方程 的 解 是 一 个 很 为 复杂 的 问题 .本 节 不 可 能 涉及 . 


7. 期 权 定 价 的 Biack-Scholes 公式 


本 段 介绍 Hiack-sScholes 在 1973 年 的 著名 论文 中 关于 股票 欧 
式 期 权 定 价 的 主要 叫 想 , 设 “种 与 股票 相 系 的 期 权 持 有 人 (己方 ) 
在 时 刻 了 的 收益 为 六 Sr) ,股票 价格 遵从 随机 微分 毛 程 ， 

ds, = S, (pdi 十 od B,}. 

问 购 天 这 期 权 在 1=0 时 应 付 多 少 ? 当 /SS 一 (Sr 一天) 时 这 个 
期 权 叫 欧式 看 涨 (calD} 期 权 , 当 S11} 一 CK 一 Sy)' 时 这 个 期 权 叫 
欧式 看 跌 (put) 期 权 , 看 跌 期 权 的 卖 出 方 有 在 工时 刻 以 K 的 价格 
从 乙方 (期 权 闫 进 方 ) 买 进 该 期 权 所 系 股 票 的 义务 ,但 是 实 进 期 权 
方 ( 乙 方 ) 可 以 卖 出 股票 也 可 以 不 卖 ( 只 在 股价 帕 的 时 候 志 ,从 中 获 
蔓 ( 开 一 Sr) ,本 段 与 第 6 段 是 分 别 从 不 闻 的 角度 去 解决 同 -个 问 
题 . 

设 在 了 收益 为 (Sr) 的 股票 期 权 在 (<7) 时 刻 价格 为 
tes5.) (于 是 在 1 二 0 时 该 期 权 的 定价 为 > 一 严 (0,S。)) 下 面 要 用 
Ito 会 式 求 忆 (tr) 的 显 式 表达 . 

虚拟 期 权 卖 出 方 在 上 时 刻 买 进 4 份 (4 待定 ?股票 以 托 销 在 了 
半 肇 摸 失 A(S7} 的 风险 , 即 它 花费 了 A，5S,, 于 是 在 : 时 刻 他 有 余 
额 

NO— FOS)— A.S,. 
到 了 z 十 dt 时 刻 , 这 价值 变 为 
Nora = PUT dts) — A.S,,. 
于 上 生 由 Ito 公式 
dN =dF(,S) — A.dS, 
_aF 


or AaF., 1 ¥F. 
7 人 十 了 dr 十 cdB,) 十 可 二 Gd 
AS Chi odB.) 
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1 J 
-| 2 alosaB+| 5 65 | 先 ti | dt 
取 4. SI) 使得 
,iAaF 1, 2 二 | 
dN, -= ， -7 了 5 z| dt, 
上 邮 时 裴 响 随 机 波 大 的 因 察 不 再 出 现 ; 所 以 六 应 是 无 风险 的 , 即 
dv ， 、 
于 一 FAN， (rr 为 利率 })， 
也 就 是 
oS? 2 十 —rF. 4.S8) 一 十 大 一 2 3 ， 
即 忆 避 ,r 和 神 足下 述 Black-Scholes 方程 
oF ladF AF 





开 十 Fo J 二 rx 可 rp 一 . 


吧 由 下 他 Sr) 一 A577 5; 可知 应 有 终端 条 件 : 玉 (了 ,x) 一 x). 令 
{=T tr mlogrG=e” wa (适当 选取 常数 ,就 变 成 热 


方程 
{Cr Fe © 


dr gx 


的 初 值 问题 ,从 而 可 得 显 式 解 (Black-Scholes 公式 ) 
1 


[rr te VT 








Ft) 一 所 一 offenye 2 ， 
1 加 
Xx e dy 
v2 - 
习 题 


上 求 对 应 于 相关 函数 为 B69) = Ye 20 >0) 的 非 退 化 的 
宽 马 氏 平稳 Gauss 过 程 的 条 件数 学 期 望 x 全 上 ($1 一 这) 与 条 
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下 
2, 于 题 上 和 梧 7 一 8 一 Tc fl 记 a 一 
人 证明 
[a 


人 
(2 a 其 中 


『 
| 1 十 人 一 ee 
| 2 
BE, ds) dn Er! dn) 
《用 归纳 法 ). 
| 


3. 证 明 Brown 运动 为 时 齐 Markov 过 程 ; 求 出 它 的 转移 沙 
数 . 

4- 证 明和 平稳 Gauss-Markov 过 程 是 可 道 的 , 即 对 性 音 %n 及 TT 
> 有 相同 的 联合 密 
庶 . 

5. 仿照 定 久 9.2 给 出 到 利于 RR 的 连续 时 间 时 齐 Markov 过 
程 的 定义 假定 有 联合 分 布 密度 ). 

6， 坛 证 明 #4 维 的 Brown 公 动 1 已 :ff 0), 

[| 





B=| ;| 
| 
(参见 $2.3 的 第 一 段 ) 是 时 齐 的 a 维 Markovy 过 程 ( 即 取 值 为 d 
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维 疝 齐 值 的 Markov 过 程 }- 
7. 设 算 隆 4 为 非 负 定 对 称 ( 即 所 有 特征 值 部 小 上 上 0 人生 

RY 为 4 维 半 稳 Gauss 过 程 , 寺 有 
FES0. EC ee 


| 拭 阵 函数 “人 /十 半 + 全 te 





1 
(1) 求证 1,,tER} 的 转移 密度 咀 数 为 
pip 一 Nervzrsl- e'*)( 棒 中 7 了 为 单位 朱 阵 ); 
(2) linplrcc y)-rN COT; 


(3) 16,1ER}; 蚌 时 齐 胸 Markov 过 程 . 
8. 设 
195 =0 (一 维 状 态 方 程 )， 
id 一 gdr 十 za 号 (一 维 测 量 方程 ). 


求证 ; 苦 取 TV = 可, 0, 则 7 一 一 
9. 一 维 滤波 系统 
fab = 到 有 
ldy, 一 dB 【有 和 站 独立 )， 


Vo=oi, $= 人 0 证明 一 YP -> oY. 又 若 取 VV 二 0,p 一 了 一 1， 


则 有 T, = thi， £ ,二 和 | shuas,. 

i0. -- 维 系统 

de, = utdr, 
人 =— td 十 3 局 ， 

Romey Varg 一 人 过, 若 取 To = Var 多 ,求证 > 2672. 再 其 取 了 二 
2a77 , 求 5 

il, 用 Kalman Buey 滤波 器 ,把 末 知 参数 避 作为 状态 ,对 以 下 

367 





系统 求 了 的 Kalman-Bucy 滤波 
dp 一 BMdrz 二 dB, 5 旺 测 方 程 ). 
12， 对 一 维系 统 
[de. 一 dtdt + pdB'', 
dy mdf 十 YdB2 (Bi BA 独立 )， 
— EB0, 


—RO .其 由 4 一 天 2 


ro par -YY VY ryr 
Bo mitari oy vay mpi), 


及 六 二 下 , 慌 证 二 





如 一 exp| Em | ， 
久 才 Pas 并 到 凡 一 如 ., 则 有 
£, 二 ue- 十 WPe “|e dy,，, 


其 路- -7 工人 





368 





案 引 


点 
捷 分 布 收 训 ” 2.3 辣 R5 产 了 异 刑 28. 351 
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不 宰 ( 和 概率 ) 分 布 3.3,5. 4-5.6 
不 变 测 度 3.3,5.4.5,.6 不 灾 原理 2.3 
不 变 捷 7.2 
不 可 约 3.2 

L 
策 罗 和 6 常理 3.2.6.4 

Dn 
带 小 称 的 Brown 运动 ”2.3 调制 i 信号》 9,4 
选 代 映 射 6.1 
Dobrushin 不 等 式 6.2 Debrushin 数 人 2 
独立 增 贡 2.2 
对 称 化 数列 3. 7,5, 5 对 称臣 二 撩 .7 


村 称 昌 -过 程 .5 
369 





Erlang 流 5 站 


F 
谣 盟 中心 极 承 定理 2.3 反锁 控制 9.3 
反射 诛 昌 2.1 
反正 弦 夏 2.3 非常 返 32.51 
非 线性 滤 焉 0 3 
分 商 原 则 99.4 分 译 过 程 4.1.5.3 
复合 Poivwon 过 程 5.1 
Frobenius Perron 定名 3.7 
GG 
Cnron- atvon 分 二 过 程 4. 上 Gausg 这 梓 ! 系 ) 8.] 
(ausy 定 惠 83.4 
Gauss 二 儿 过 程 39.1],9.2 Gilsuber 动 方 党 5.3,5.5 
更 新 定理 3.5.5.6 
只 痢 过 程 .更 新 方程 j.6 型 新 流 . 更 新 间 栅 5.6 
新 次 数 5.6 
CGibbs Sampler 3.6 Gibbs 样本 生成 法 3. 
(nbbs 坊 .Gibbs 分布 4.4,5.3.5,5 
轨道 ( 右 ) 连 续 35.2 
H 
乒 退 方 树 5.2 HIB 闻 程 9.3 
HMAT 41.5 
Hoptietd 辐 步 地 力学 14,4 Hepfield 异步 动用 学 二 二 
作 通 3.2 
混合 7.3 
】 
fng 模型 5. 3.5.5 TD 公式 09.9 


Ne 和 分 9.2 
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击 中 分 布 


下 环 控制 
是 这 ”3.2 


2.3 


09.3 


可 道 志 氏 妨 3.6 
可 道 已 过 程 5.5 
Kolmopgror-Chapman 方程 


宽 污 多 9 


蕊 讽 历 5. 
虹 测 方程 84.9.3 
零 带 返 3. 


MA 异型 于 了 
AMAN 排队 过 得 


马 压 策略 
马 氏 过 程 


号 氏 控制 策略 9.3 


1 


2 


3 


4.6 
9.1 


Master 方程 3 


年 龄 5.6 
船 合 谨 法 


.8 


3. 


| 


几何 Brown 运动 9.2 解 调 日 3 


B2106. 1.9,.1 


| 


用 


Pp 


Kaiman- Bucy 滤波 8. 4.9.3 
本道 5( 平 稳 并 不 灾 ? 耸 布 3,6.5.5,5.6 


其 olinogorov 上 叮 族 玲 则 3.& 
宽 平 稳 列 8.2 


Langeyin 上 方程 9.2 


滤波 8.14 


Markov 衬 ,与 拟 衬 3.116.1 
季 氏 性 3.1,6.1,9.] 


模拟 退火 ”4.2 


DU 过 种 9.1 
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六 [及 集 3.9 排 耻 系 统 5.5 
配 称 分 布 5.5 

平均 等 待 时 间 5. 14 Peissen 过 程 
了 和 焰 第 本 4. 
平 称 不 变 分 布 二 
平 稻 吾 开 控 制 策 略 
症 稳 序 烈 7. 1 


5- 1 


4.7. 平稳 Gauss 过 程 9.1 


有 
日 .名 


Q 过 程 5.1 肌 进 态 积 5.2 
» 


栓 人 人 履 5.2 
强 马 氏 化 3.4 强 指数 收 艇 尾 ”6.8 


期 权 定 全 ”1n.3 





Rieceartijl 方程 9.3 


坑 7.3 神经 网 络 4.1 
生 光 过 程 53.3.5.4,5.6 

事件 体 (” -代数 ) 1 1 时 齐 性 3.1,6-1.9.1 
首次 返回 (离开 ) 时 间 2.1 

首 中 时 , 首 中 耸 布 3.1.3.5 随机 过 程 1.1 

随机 积分 9 2 

秀 视 控制 9 3 随机 律 彻 1 1 
随机 注 分 上 得 9.2 

随机 序列 的 炊 7 了 .3 





芭 件 期 望 ” 第 失 萤 附 斌 这 件 姑 7.3 
3 
投影 7 1 


Yen Neunamr 拒 收 康 则 吉 三 


号 7 





Wald 站 下 


系统 的 大 效 应 5， 
囊 枚 平衡 各 作 ”3.6 
相对 娘 了 


新 息 计 程 


洲 化 算法 
侠 奉 了 


基态 ”3.2 
让 券 9.3 
指数 流 3 
齐 态 5.3 
转移 短 阵 
状态 方程 


最 大 粮 7. 


最 优 估计 


2. 5 


5 


对 
9 3 


6G- 2 


总 ,月 


3. 1 

间 . 4 ,9.3 
3 

9. 3 


项 收 壁 2. 


缆 性 预测 


隐 Markox 模型 


正常 返 3. 


指数 遍历 (收敛 ) 持 


柱 集 11 
转移 概率 密 
转移 速 举 所 
坐标 过 程 
最 大 情 分 布 


1 


| 


3 


度 
阵 
1.1 


之 


31 襄 


+4- 


Ea 
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